दावे अते सबूत जांचो

What this lesson is about

जवाब नूं ऐसे दाव्यां विच वंडो जिण्हा दी तुसी जांच कर सकदे हो। असली सबूत नूं ओह शब्दां तों वखो जिण्हा दा मतलब सिर्फ़ सही लगदा ऐ।

पेंशन योजना बारे तीन वाक्यां दा जवाब इक तारीख, इक गिनती अते इक वादा मिलाके बनया है। तुसीं कित्थों शुरू करोगे?

Why this matters

ठीक गिनती, तारीखां अते ऐसे दावे जिण्हा नूं पलटना मुश्किल होवे, फैसले बदल सकदे ने। एहो गल सच ऐ भले ही लिखाई सही लगदी होवे।

जवाब नूं अलग-अलग दाव्यां विच वंडो, अते तय करो कि पहला किहड़ा दावा जांचना जरूरी ऐ।

हर पंक्ति विच इक जांचण योग्य दावा निकालो।
सब तों जरूरी ते सटीक दावे पहले जांचो।
स्रोत दी गुणवत्ता ते बची अनिश्चितता दर्ज करो।

Task

एक प्रोग्राम दावे करदा ऐ कि 62% लोकां नूं नौकरी मिली।

Weak approach दावा नूं अपनी अलग पंक्ति विच कड्डदा ऐ, जिणा पहला नियम पूरा होन्दा ऐ। आकड़ा लब्बदा ऐ अते इक खबर दा पन्ना लब्बदा ऐ जिथे ओह 62% वदिया होया ऐ, फेर दावा नूं समर्थन वाला चिन्ह लगांदा ऐ। खबर दा पन्ना प्रोग्राम दी अपनी प्रेस नोट दोहरा रिया ऐ, अते किसे नूं नहीं पता कि 'काम मिलना' विच किनू गिन्या जान्दा ऐ।

Stronger approach पहली रिपोर्ट लब्बदा ऐ, ओह दी तारीख अते किनू गिन्या गया। ओथे पढ़दा ऐ कि 'काम मिलना' विच हर किसम दी पेड नौकरी शामिल ऐ, इक हफ्ते दा ठेका वी। दावा नूं समर्थन वाला पर फेर बदलेया होया लिखदा ऐ, अते दसदा ऐ कि एह फैसला किन्ना बदलदा ऐ।

Why the stronger approach works दोनों समीक्षकां ने आकड़ा चेक कित्ता अते दोनों नूं मिल गया। पर ओह जगह जिथे लिख्या ऐ कि किसे किसम दी गिनती हुंदी ऐ, ओथे सिरफ इक गया, जिथे दावा दा मतलब बदलदा ऐ।

Try a changed situation हुण इक स्कूल फीस वापसी वाला संदेश है जो इक माता-पिता तुहाडे फोन ते भेजदा है। तुसीं किहड़ा हिस्सा पहले देखोगे?

Make something yourself तीन वाक्यां वाले जवाब लई दाव्यां दी मेज बनाओ: दावा, ओह किस चीज़ नूं प्रभावित करदा ऐ, जरूरी स्रोत अते जेड़ा पक्का नहीं।

Read the primary or official source: Wei et al., Long-form factuality in large language models (arXiv)