All learning paths Learn See Try Make লঞ্চের আগে একটি চেক সেট তৈরি করুন What this lesson is about পঞ্চাশটি আসল ইনপুট লিখুন যেগুলোর উত্তর আপনি আশা করেন, এবং কিছু পরিবর্তন করার পর প্রতিবার এগুলো চালান।
আপনার ছোট্ট টুলটি একটি জেলার প্রকল্প হিন্দিতে বোঝায়। আগামী সপ্তাহে বিশজন এটি পাবে। তখনও আগে আপনি কী তৈরি করবেন?
A পঞ্চাশটি আসল ইনপুট লিখুন প্রত্যাশিত উত্তরসহ, এবং প্রতিটি পরিবর্তনের পর এগুলো চালান। B বিশজনের মধ্যে পাঁচজনকে বলুন এটি ব্যবহার করে দেখুক এবং যা ভুল হয় তা আপনাকে পাঠাক। C পঞ্চাশটি আসল প্রশ্ন লিখুন এবং প্রতিটি উত্তর পড়ে দেখুন ঠিক আছে কিনা।
Check my recall Why this matters শুধুমাত্র সহজ প্রশ্নে পরীক্ষা করা টুলটি আসলে পরীক্ষা করা হয়নি। এর বিচার করার নিয়ম হল এমন উদাহরণ ব্যবহার করা যা থেকে এটি তৈরি হয়নি। আপনার নিজের পঞ্চাশটি আসল ইনপুট সেটি।
আসল ইনপুটের একটি চেক সেট তৈরি করুন প্রত্যাশিত উত্তরসহ, এবং প্রতিটি পরিবর্তনের পর এটি চালান।
শুধুমাত্র সহজ প্রশ্নে পরীক্ষা করা টুলটি আসলে পরীক্ষা করা হয়নি। এর বিচার করার নিয়ম হল এমন উদাহরণ ব্যবহার করা যা থেকে এটি তৈরি হয়নি। আপনার নিজের পঞ্চাশটি আসল ইনপুট সেটি।
পঞ্চাশটি আসল ইনপুট লিখুন প্রত্যাশিত উত্তরসহ, এবং প্রতিটি পরিবর্তনের পর এগুলো চালান। যে ইনপুটগুলোতে ব্যর্থতার আশা করেন সেগুলো অন্তর্ভুক্ত করুন, এবং সেগুলো ব্যর্থ হয়েছে তা নথিভুক্ত করুন। প্রতিটি ফলাফল তারিখ এবং সংস্করণসহ সংরক্ষণ করুন, না হলে খারাপ পরিবর্তন লুকিয়ে যাবে। Task একটি ছোট টুল একটি জেলার যোজনার প্রশ্নের উত্তর হিন্দিতে দেয়। আগামী সপ্তাহে বিশজন এটি পাবে।
Weak approach যে পঞ্চাশটি প্রশ্নের উত্তর টুলটি আগে থেকেই ভালোভাবে দেয়, সেগুলো লিখে একবার চালায় এবং পরিষ্কার পাতা ফোল্ডারে রাখে। এই সেটে কিছুই ব্যর্থ হতে পারে না, তাই আগামীকালের পরিবর্তন দেখা যাবে না।
Stronger approach পঞ্চাশটি এমন প্রশ্ন লিখে যেগুলো মানুষ সত্যিই করে, প্রতিটির সাথে থাকা উচিত এমন উত্তরও দেয়। আজ টুল যেগুলোতে ব্যর্থ হয় সেগুলোর মধ্যে আটটি রাখে, এবং প্রতিটি ফলাফলের পাতায় তারিখ ও সংস্করণ ছাপিয়ে রাখে।
Why the stronger approach works আজ যেগুলো ব্যর্থ হচ্ছে সেগুলোই আগামীকালের পরিবর্তনকে দৃশ্যমান করে। সহজ প্রশ্নের শীট পাস হয় এবং কিছু বলে না।
Try a changed situation একজন বন্ধু একটি গ্রামের কমিটির নতুন ফর্ম ৫০০ কপি মুদ্রণের আগে পরীক্ষা করছে। কোন নিয়মটি এখনও প্রযোজ্য?
Make something yourself আপনি যা তৈরি করেছেন তার জন্য পঞ্চাশটি আসল ইনপুটের একটি চেক সেট লিখুন, প্রত্যেকটির সাথে প্রত্যাশিত উত্তর। এটি দুইবার চালান, এবং দুই ফলাফল শীট তারিখসহ সংরক্ষণ করুন।
Read the primary or official source: Hugging Face Evaluate · Considerations for model evaluation