All learning paths Learn See Try Make లాంచ్ చేసేముందు చెక్ సెట్ తయారుచేయండి What this lesson is about మీరు ఆశించే సమాధానాలతో యధార్థమైన యాభై ఇన్పుట్లను రాయండి, మరియు ఏదైనా మార్పు చేసినప్పుడు వాటిని నడపండి.
మీ చిన్న సాధనం ఒక జిల్లా పథకాన్ని హిందీలో వివరిస్తుంది. వచ్చే వారం ఇరవై మంది దాన్ని పొందుతారు. అప్పటికి మీరు ఏమి తయారు చేస్తారు?
A ఆశించిన సమాధానాలతో యాభై నిజమైన ఇన్పుట్లు రాయండి, మరియు ప్రతి మార్పు తర్వాత వాటిని నడపండి. B ఆ ఇరవై మందిలో ఐదుగురిని దాన్ని ప్రయత్నించమని చెప్పి, ఏదైనా తప్పు జరిగితే మీకు పంపించమని చెప్పండి. C యథార్థమైన యాభై ప్రశ్నలు రాయండి, ప్రతి జవాబును చదివి అది సరైనదిగా ఉందా అని చూడండి.
Check my recall Why this matters సులభమైన ప్రశ్నలపై మాత్రమే పరీక్షించిన టూల్ నిజంగా పరీక్షించబడలేదు. దాన్ని అంచనా వేయడానికి, అది తయారైన ఉదాహరణలకంటే వేరే ఉదాహరణలను ఉపయోగించాలి. మీ స్వంత యాభై నిజమైన ఇన్పుట్లు అదే పని చేస్తాయి.
ఆశించిన సమాధానాలతో యధార్థ ఇన్పుట్ల చెక్ సెట్ తయారుచేసి, ప్రతి మార్పు తర్వాత నడపండి.
సులభమైన ప్రశ్నలపై మాత్రమే పరీక్షించిన టూల్ నిజంగా పరీక్షించబడలేదు. దాన్ని అంచనా వేయడానికి, అది తయారైన ఉదాహరణలకంటే వేరే ఉదాహరణలను ఉపయోగించాలి. మీ స్వంత యాభై నిజమైన ఇన్పుట్లు అదే పని చేస్తాయి.
ఆశించిన సమాధానాలతో యాభై నిజమైన ఇన్పుట్లు రాయండి, మరియు ప్రతి మార్పు తర్వాత వాటిని నడపండి. మీరు తప్పు వచ్చే ఆశ ఉన్న ఇన్పుట్లను కూడా చేర్చండి, అవి తప్పిపోయాయని నమోదు చేయండి. ప్రతి ఫలితాన్ని దాని తేదీ మరియు వెర్షన్తో ఉంచండి, లేకపోతే చెడు మార్పు దాచిపోతుంది. Task ఒక చిన్న టూల్ జిల్లా పథకం గురించి హిందీలో ప్రశ్నలకు సమాధానం ఇస్తుంది. వచ్చే వారం ఇరవై మందికి అందుతుంది.
Weak approach పన్నెండు ప్రశ్నలు టూల్ ఇప్పటికే బాగా సమాధానం ఇస్తుంది, వాటిని ఒకసారి నడిపించి, శుభ్రమైన పత్రాన్ని ఫోల్డర్లో ఉంచుతుంది. సెట్లో ఏదీ విఫలమవదు, కాబట్టి రేపటి మార్పు కనిపించదు.
Stronger approach వాస్తవంగా ప్రజలు అడిగే యాభై విషయాలు, వాటికి ఇవ్వాల్సిన సమాధానాలతో రాస్తుంది. టూల్ ఈ రోజు విఫలమయ్యే ఎనిమిది ప్రశ్నలను ఉంచి, ప్రతి ఫలిత పత్రంపై తేదీ మరియు సంచిక ముద్ర వేస్తుంది.
Why the stronger approach works ఈ ఎనిమిది తప్పు వచ్చే ప్రశ్నలు రేపటి మార్పును చూపిస్తాయి. సులభమైన ప్రశ్నల పత్రం పాస్ అవుతుంది కానీ ఏమీ తెలియజేయదు.
Try a changed situation ఒక స్నేహితుడు గ్రామ కమిటీకి కొత్త ఫారమ్ను ఐదు వందల ప్రతులు ముద్రించే ముందు పరీక్షిస్తున్నాడు. ఏ నియమం ఇంకా వర్తిస్తుంది?
Make something yourself మీరు తయారుచేసిన ఏదైనా కోసం ఆశించిన సమాధానాలతో యాభై నిజమైన ఇన్పుట్ల చెక్ సెట్ రాయండి. దాన్ని రెండు సార్లు నడపండి, రెండు ఫలిత పత్రాలు తేదీలతో ఉంచండి.
Read the primary or official source: Hugging Face Evaluate · Considerations for model evaluation