இயந்திர மொழிபெயர்ப்பு. ஆங்கிலம் மற்றும் ஹிந்தி மதிப்பாய்வு செய்யப்பட்ட பதிப்புகள்.English हिन्दी
All learning paths Learn See Try Make தடுக்கப்பட்ட தொகுப்பை விட்டு வைக்கவும் What this lesson is about ஒரு சோதனை முடிவு ஏற்கனவே அமைப்பை சரிசெய்ய பயன்படுத்தப்பட்டதை கண்டறியவும். பிறகு தடுக்கப்பட்ட தொகுப்பை நேர்மையாக மீண்டும் உருவாக்கவும்.
உங்கள் குழு ஐம்பது கேள்விகளை விட்டு வைத்தது. தோல்வியடைந்த பன்னிரண்டு கேள்விகளை நீங்கள் படித்து, வழிமுறைகளை மாற்றினீர்கள். எந்த மதிப்பெண்களை நீங்கள் அறிவிப்பீர்கள்?
A ஐம்பதையும் அறிவிக்கவும், ஏனெனில் எந்த கேள்வியும் திருத்தப்படவில்லை. B அமைப்பை சரிசெய்ய பயன்படுத்தப்பட்ட உருப்படி அதற்கான ஆதாரம் ஆகாது. C ஐம்பதையும் அறிவித்து, பன்னிரண்டு கேள்விகள் திருத்தங்களுக்கு பயன்படுத்தப்பட்டன என்று ஒரு வரி சேர்க்கவும்.
Check my recall Why this matters தடுக்கப்பட்ட தொகுப்பு — அமைப்பு ஒருபோதும் அதில் கட்டப்படாத கேள்விகள் — விரைவில் பயன்படுத்தப்படும். அது முதன்முறையாக யாராவது தோல்விகளைப் படித்து அமைப்பை திருத்தும் போது பயன்படுத்தப்படுகிறது.
எந்த மதிப்பீட்டு உருப்படிகள் இன்னும் ஆதாரம் தருகின்றன என்பதை சொல்லவும், மற்றும் சரிசெய்ய பயன்படுத்தப்பட்ட தொகுப்பை மீண்டும் உருவாக்கவும்.
தடுக்கப்பட்ட தொகுப்பு — அமைப்பு ஒருபோதும் அதில் கட்டப்படாத கேள்விகள் — விரைவில் பயன்படுத்தப்படும். அது முதன்முறையாக யாராவது தோல்விகளைப் படித்து அமைப்பை திருத்தும் போது பயன்படுத்தப்படுகிறது.
அமைப்பை சரிசெய்ய பயன்படுத்தப்பட்ட உருப்படி அதற்கான ஆதாரம் ஆகாது. ஒவ்வொரு உருப்படியும் எதற்கும் எப்போது பயன்படுத்தப்பட்டது என்பதை பதிவு செய்யவும். அடுத்த சுற்றுக்கு முன் தடுக்கப்பட்ட தொகுப்பை நிரப்பவும்; அதே தொகுப்பை மீண்டும் பயன்படுத்த வேண்டாம். Task ஐம்பது தடுக்கப்பட்ட கேள்விகள். பன்னிரண்டு தோல்விகள் படித்து வழிமுறைகள் மாற்றப்பட்டன.
Weak approach ஐம்பது கேள்விகளிலும் எதுவும் திருத்தப்படவில்லை என்று சரிபார்க்கிறது, எதுவும் திருத்தப்படவில்லை. ஐம்பதிலும் மதிப்பெண் தெரிவிக்கிறது மற்றும் அந்த தொகுப்பை இன்னும் தனியாக வைத்திருக்கிறது. அதில் பன்னிரண்டு கேள்விகள் வழிமுறைகள் மாற்றப்பட்ட போது படிக்கப்பட்டவை, ஆகவே அந்த பன்னிரண்டு கேள்விகள் இப்போது அந்த திருத்தத்தை அளக்கின்றன.
Stronger approach தொடப்படாத 38 உருப்படிகளை தடுக்கப்பட்ட மதிப்பெண் என அறிக்கை செய்கிறது. பன்னிரண்டு உருப்படிகளை கட்டுமான உருப்படிகளாக குறிக்கிறது, புதியவை சேகரிக்கிறது.
Why the stronger approach works நேர்மையான எண் சிறியது மற்றும் பொருள் கொண்டது. பெரிய எண் குழுவின் சொந்த சரிசெய்தல்களை அளவிடுகிறது.
Try a changed situation ஒரு பள்ளி இப்போது ஒரு மாதிரியை அல்ல, புதிய கற்பித்தல் முறையை மதிப்பாய்வு செய்கிறது. எந்த விதி இன்னும் பொருந்தும்?
Make something yourself நீங்கள் மீண்டும் மீண்டும் செய்யும் எந்த சோதனையையும் எடுத்துக்கொள்ளுங்கள், உதாரணமாக பயிற்சி தேர்வு அல்லது மாதாந்திர அறிக்கை மதிப்பாய்வு. நீங்கள் ஏற்கனவே சரிசெய்ய பயன்படுத்திய உருப்படிகளை எழுதுங்கள். பிறகு சுத்தமான தொகுப்பை எப்படி சேகரிப்பீர்கள் என்பதையும் எழுதுங்கள்.
Read the primary or official source: Jain et al., LiveCodeBench: contamination-free evaluation for code (arXiv)