All learning paths Learn See Try Make جاری کرنے سے پہلے چیک سیٹ بنائیں What this lesson is about پچاس اصلی ان پٹ لکھیں جن کے جوابات آپ توقع کرتے ہیں، اور جب بھی کچھ بدلے اسے چلائیں۔
آپ کا چھوٹا آلہ ایک ضلع کی اسکیم کو ہندی میں سمجھاتا ہے۔ اگلے ہفتے بیس لوگ اسے حاصل کریں گے۔ اس سے پہلے آپ کیا بنائیں گے؟
A پچاس اصلی ان پٹ متوقع جواب کے ساتھ لکھیں، اور ہر تبدیلی کے بعد انہیں چلائیں۔ B ان بیس میں سے پانچ سے کہیں کہ اسے آزما کر دیکھیں اور جو بھی غلط ہو آپ کو بھیج دیں۔ C پچاس اصلی سوال لکھیں اور ہر جواب پڑھ کر دیکھیں کہ وہ درست لگتا ہے یا نہیں۔
Check my recall Why this matters ایسا ٹول جو صرف آسان سوالات پر آزمایا گیا ہو، اصل میں آزمایا نہیں گیا۔ اسے پرکھنے کا اصول ہے کہ ایسے مثالیں استعمال کریں جن سے وہ بنایا نہ گیا ہو۔ آپ کے اپنے پچاس اصلی ان پٹ وہی کام کرتے ہیں۔
متوقع جوابات کے ساتھ اصلی ان پٹ کی چیک سیٹ بنائیں، اور ہر تبدیلی کے بعد اسے چلائیں۔
ایسا ٹول جو صرف آسان سوالات پر آزمایا گیا ہو، اصل میں آزمایا نہیں گیا۔ اسے پرکھنے کا اصول ہے کہ ایسے مثالیں استعمال کریں جن سے وہ بنایا نہ گیا ہو۔ آپ کے اپنے پچاس اصلی ان پٹ وہی کام کرتے ہیں۔
پچاس اصلی ان پٹ متوقع جواب کے ساتھ لکھیں، اور ہر تبدیلی کے بعد انہیں چلائیں۔ وہ ان پٹ بھی شامل کریں جن میں آپ کو ناکامی کی توقع ہے، اور درج کریں کہ وہ ناکام ہوئے۔ ہر نتیجہ کو اس کی تاریخ اور ورژن کے ساتھ رکھیں، ورنہ خراب تبدیلی چھپ جائے گی۔ Task ایک چھوٹا ٹول ضلع کی اسکیم کے سوالات کا جواب ہندی میں دیتا ہے۔ اگلے ہفتے بیس لوگوں کو ملے گا۔
Weak approach پچاس ایسے سوال لکھتا ہے جن کے جواب ٹول پہلے سے اچھے دیتا ہے، انہیں ایک بار چلاتا ہے، اور صاف صفحہ فولڈر میں رکھ دیتا ہے۔ سیٹ میں کچھ بھی فیل نہیں ہو سکتا، اس لیے کل کی تبدیلی نظر نہیں آئے گی۔
Stronger approach پچاس ایسی باتیں لکھتا ہے جو لوگ واقعی پوچھتے ہیں، ہر ایک کے ساتھ وہ جواب جو آنا چاہیے۔ آٹھ ایسے رکھتا ہے جن پر ٹول آج فیل ہوتا ہے، اور ہر نتیجہ کے صفحے پر تاریخ اور ورژن لگا دیتا ہے۔
Why the stronger approach works آج ناکام ہونے والے وہ آٹھ سوالات کل کی تبدیلی کو ظاہر کرتے ہیں۔ آسان سوالات والی شیٹ پاس ہو جاتی ہے اور کچھ نہیں بتاتی۔
Try a changed situation ایک دوست گاؤں کی کمیٹی کا نیا فارم پانچ سو کاپیاں چھپوانے سے پہلے آزما رہا ہے۔ کون سا اصول اب بھی لاگو ہے؟
Make something yourself اپنی بنائی ہوئی کسی چیز کے لیے پچاس اصلی ان پٹ کی چیک سیٹ لکھیں، ہر ایک کے ساتھ متوقع جواب۔ اسے دو بار چلائیں، اور دونوں نتیجہ شیٹس تاریخ کے ساتھ رکھیں۔
Read the primary or official source: Hugging Face Evaluate · Considerations for model evaluation