बदलण तों पहलां नापो

What this lesson is about

अपने पचास उदाहरणां ते इसदा नतीजा लिखो। ओ नंबर ही तुहाडे बदलाव दी परख करन वाला इकल्ला आधार ऐ।

तुस्सी छोटे मॉडल नूं दित्ता गया हुकम फेर लिखण वाले हो ताकि उसदे हिंदी जवाब वधिया हों। पहला की करना?

Why this matters

Hugging Face दी सलाह ऐ कि जिहड़े उदाहरणां तों चीज बनी ऐ, उन्हां ते ओह्नू परखना ठीक नहीं। स्कोर वधिया लगदा ऐ पर ओहदा कोई मतलब नहीं। बिना तारीख अते बिना संस्करण वाली गिनती किसे नाल तुलना लायक नहीं।

तुस्सी मॉडल नूं अपने उदाहरणां ते नाप सकदे हो अते उस नाप नूं एसे तरियां दर्ज कर सकदे हो कि बाद विच तुलना हो सके।

कुछ बदलण तों पहलां लिखो कि ओह तुहाडे पचास उदाहरणां ते किदा करदा ऐ।
जिहड़े मुश्किल मामले तुहाडे ख्याल विच ओह न कर पावेगा, उन्हां वी शामिल करो, नहीं त स्कोर ओह्नू ज्यादा वधिया दिखावेगा।
स्कोर दे नाल तारीख, मॉडल दा संस्करण अते इनपुट वी दर्ज करो।

Task

तुस्सी छोटे मॉडल नूं दित्ता जाण वाला निर्देश बदलण वाले हो ताकि ओहदे हिंदी जवाब वधिया होण।

Weak approach निर्देशन बदलना, पाँच जवाब पढ़ना, अते फैसला करना कि हिन्दी हुण वधिया है। किसे ने पुराने निर्देशन दा स्कोर लिखया नहीं, इसलई वधिया दा मुकाबला करन लई कुछ नहीं।

Stronger approach पहला अपने पचास संदेशां ते स्कोर करना, तारीख अते संस्करण लिखना, अते फेर इक गल बदलना।

Why the stronger approach works पहली गिनती बिना, 'वधिया' सिरफ एहसास ऐ। उस दे नाल बदलाव इक गिनती बन जांदी ऐ जिहड़ी तुसी किसे नूं दिखा सकदे हो।

Try a changed situation इक दोस्त साबित करना चांदी ऐ कि ओहदा नया पढ़ाण दा तरीका काम करदा ऐ। ओह उन्हीं दस सवालां ते परखण दी योजना बना रही ऐ जिनां तों ओह पढ़ाया सी। तुसी ओह्नू की कहोगे?

Make something yourself इक मॉडल दी पहली नाप बनाओ। अपने पचास इनपुट, हर इक दा उम्मीद वाला जवाब, अते मॉडल ने की दित्ता — लिखो। नाल अपना स्कोर, तारीख अते संस्करण वी जोड़ो।

Read the primary or official source: Hugging Face Evaluate · considerations for model evaluation