All learning paths Learn See Try Make मार्क करे मॉडल बुजाबो What this lesson is about आफुनर निशान आरो मॉडलर निशान मोजा, आरो थानि आदत थुनाय जाबो जाबा हाबा हाबा आंकड़ा बेकार कराय।
काम देबो वाला हप्ताहो 2000 उत्तर निशान चाहाय आरो एक मॉडल देबो। कहाँ सुरुवात करबो?
A सब उत्तरर उपर मॉडल चलाय, फिनि किछु पढ़ाय निशान ठीक लगाय नाकी। B पहिले एक सेट हाथे निशान लगाय, फिनि गिनाय कतेक बेर मॉडलर निशान आफुनर संग मेलाय। C काम देबो वाला स पूछाय कुन मॉडल आसे, आरो देखाय किदां बनाय आरो परखाय गेले।
Check my recall Why this matters मॉडल एक मंडलिसे बेसी उत्तर निशान लगाय सकाय। एक प्रकाशित अध्ययनर अनुसार एक मजबूत मॉडल मनुखर संग करीब 80% मेलाय, जाबा दू मनुखर मेलाय। ओइ अध्ययन आदत थुनाय जे लंबा उत्तर जिताय, पहिला उत्तर जिताय, आरो मॉडल अपन लिखाई भाल पावाय।
मॉडलर निशान आफुनर निशानर संग बुजाबो, ताहां बादे एको आंकड़ार भरोसा कराय।
मॉडल एक मंडलिसे बेसी उत्तर निशान लगाय सकाय। एक प्रकाशित अध्ययनर अनुसार एक मजबूत मॉडल मनुखर संग करीब 80% मेलाय, जाबा दू मनुखर मेलाय। ओइ अध्ययन आदत थुनाय जे लंबा उत्तर जिताय, पहिला उत्तर जिताय, आरो मॉडल अपन लिखाई भाल पावाय।
पहिले एक सेट हाथे निशान लगाय, फिनि गिनाय कतेक बेर मॉडलर निशान आफुनर संग मेलाय। तीन आदत थुनाय: लंबा उत्तर जिताय, पहिला उत्तर जिताय, आरो मॉडल अपन लिखाई भाल पावाय। मेल आंकड़ा गिनती संग प्रकाशित कराय, मॉडलर अंक अकेले नहां। Task एक दल चाहाय जे मॉडल हप्ताहो 2000 हिन्दी उत्तर निशान लगाय।
Weak approach मॉडल 2000 उत्तरर उपर चलाय, पास दर रिपोर्ट कराय, आरो किछु निशान ठीक लगाय। हाथे एको निशान न लगाय।
Stronger approach पहिले 80 उत्तर हाथे निशान लगाय। मॉडल 62 संग मेलाय, आरो 18 अलगावर 14 लंबा उत्तरर पक्ष मं जाय। बाकी चलाबो आगो दुनु गिनती रिपोर्ट कराय।
Why the stronger approach works दुनु मॉडल इस्तेमाल कराय। फाके मजबूत जवाब देबो जे आंकड़ा किमान होय।
Try a changed situation मॉडल दस जोड़ियामं सात बेर ऊपर दिखाय उत्तर जिताय। आफुनर निशान आधा-आधा बंटाय।
Make something yourself चालीस उत्तर हाथे निशान लगाय, फिनि ओइ चालीस उत्तर मॉडलर संग निशान लगाय। मेल रिपोर्ट कराय आरो अलगावर आदत नाम देबो।
Read the primary or official source: Zheng et al., Judging LLM-as-a-Judge with MT-Bench and Chatbot Arena (arXiv)