تحقق من بيانات ضبط المحادثة وقدّر التكلفة

الهدف

تحقق من بنية محادثات JSONL وأنواع الأخطاء والإحصاءات وتكلفة الرموز قبل إعداد ملف تدريب نظيف.

الخطوات

1. تحقق من messages وحقول role/content والمفاتيح غير المعروفة لكل سطر. [source-openai-validate-chat-finetuning-dataset]
2. احسب العدد والأطوال وتقدير الرموز وعلّم التجاوزات. [source-openai-validate-chat-finetuning-dataset]
3. أعد التحقق بعد الإصلاح وراجع عينة قبل قرار الرفع البشري. [source-openai-validate-chat-finetuning-dataset]

طريقة التحقق

تحقق من عدد أسطر JSONL والمقبول والمرفوض وأنواع الأخطاء وتقدير الرموز؛ وتأكد من أن الملف المنظف يحوي أمثلة صالحة فقط.

معالجة الأعطال

للأسطر المرفوضة، افحص ترتيب الأدوار أو بنية JSON أو حقول الرسائل باستخدام رقم السطر؛ ولا تستبدل الملف الأصلي.