رکھٕ ہٲلڈ آؤٹ سیٹ ہٲلڈ آؤٹ

What this lesson is about

پہچان کرو ژٔ ٹیسٹ نتیجہ پٲہلے ہی سسٹم درست کرنہ ژٔ استعمال ہوٚ چھ۔ تہ ہٲلڈ آؤٹ سیٹ سچائی سٲتھ دوبارہ تیار کرو۔

تُہند ژٹھ نے پٲنجٕھ سوال بچا رکھے۔ تُہند بارہ سوال پڑھے جو ناکام ہوئے تہ ہدایات بدلی۔ کتھ سکور رپورٹ کران؟

Why this matters

ہٲلڈ آؤٹ سیٹ — سوال ژٔ سسٹم پٲہلے کبھی نہ بنایا گیا — جلدی ختم ہوٚ۔ جدو کوئی ہٲن کی ناکامیاں پڑھٕ تہ سسٹم بدلٕ، سیٹ ختم سمجھو۔

بتاؤ کٲہ کٲن جائچ اشیاء اب بھی ثبوت رکھن، تہ جدو سیٹ درست کاری ژٔ استعمال ہوٚ تہ ہٲن دوبارہ تیار کرو۔

جو اشیاء سسٹم درست کرن ژٔ استعمال ہوٚ، ہٲن سسٹم بارے ثبوت نہ رہند۔
ریکارڈ رکھو ژٔ ہر اشیاء کٲہ کام ژٔ استعمال ہوٚ تہ کب۔
اگلے وار ژٔ پہلے ہٲلڈ آؤٹ سیٹ دوبارہ بھرو؛ ہٲن دوبارہ استعمال نہ کرو۔

Task

پچاس ہٲلڈ آؤٹ سوال۔ بارہ ناکامیاں پڑھی تہ ہدایات بدلی گٲ۔

Weak approach یہ چیک کرتھ کہ پچاس سوالان منز کٲئی ترمیم نہ کیتھ، تہ کٲئی ترمیم نہ کیتھ۔ پچاسن چھُند سکور رپورٹ کرتھ تہ ہنوز اس سیٹ چھُند الگ رکھان۔ بارہ سوال پڑھان دوران ہدایات بدلن، تہ ہن بارہ سوال اوہ اصلاح ناپن۔

Stronger approach بچہ چھُٹ پٲٹھ تینتیس آٹھ اشیاء ژٔ ہٲلڈ آؤٹ سکور طور رپورٹ کرن۔ بارہ ژٔ درست کاری اشیاء لکھن، تہ نوان سوال جمع کرن۔

Why the stronger approach works سچ نمبر چھ چھوٹ چھ تہ معنی رکھٕ۔ وڈ نمبر ٹیم ژٔ اپنی درست کاری ماپٕ۔

Try a changed situation اب ایک سکول نواں پڑھان طریقہ پرکھٕ چھ، ماڈل نہ۔ کٲہ اصول ہٲن بھی لاگو؟

Make something yourself کوٚنہ چیک لو ژٔ تُہند بار بار کرٕ، جیوٚں کہ ماک ٹیسٹ یا ماہانہ رپورٹ جائزہ۔ لکھو ژٔ کٲن اشیاء تُہند پہلے ہی درست کاری ژٔ استعمال ہوٚ۔ تہ لکھو ژٔ تُہند صاف سیٹ کیون کرن۔

Read the primary or official source: Jain et al., LiveCodeBench: contamination-free evaluation for code (arXiv)