దావులు మరియు సాక్ష్యాలను తనిఖీ చేయండి

What this lesson is about

జవాబును మీరు తనిఖీ చేయగల దావులుగా విభజించండి. నిజమైన సాక్ష్యాన్ని కేవలం సరైనట్లు అనిపించే మాటల నుండి వేరుచేయండి.

పెన్షన్ స్కీమ్ గురించి మూడు వాక్యాల జవాబు ఒక తేదీ, ఒక సంఖ్య మరియు ఒక వాగ్దానం కలిపి ఉంటుంది. మీరు ఎక్కడి నుంచి మొదలుపెడతారు?

Why this matters

ఖచ్చిత సంఖ్యలు, తేదీలు మరియు తిరస్కరించలేని దావులు నిర్ణయాలను మార్చగలవు. ఇవి వ్రాత సరైనదిగా అనిపించినా కూడా నిజం.

జవాబును దావులుగా విభజించి, మొదట ఏ దావును తనిఖీ చేయాలో నిర్ణయించండి.

ప్రతి వరుసలో ఒక పరీక్షించదగిన వాదనను తీసుకోండి.
ముఖ్యమైన ఖచ్చితమైన వాదనలను ముందుగా తనిఖీ చేయండి.
మూలం ఎంత మంచి దాని రికార్డు మరియు ఇంకా ఏది అస్పష్టమో నమోదు చేయండి.

Task

ఒక ప్రోగ్రామ్ 62% మంది ఉద్యోగం పొందారని దావా చేస్తుంది.

Weak approach దావును వేరే పంక్తిగా తీసుకుంటుంది, ఇది మొదటి నియమం పాటించడం. ఆ సంఖ్యను వెతుకుతుంది, ఒక వార్త పేజీలో అదే 62% కనిపిస్తుంది, అప్పుడు దావును మద్దతుగా గుర్తిస్తుంది. ఆ వార్త పేజీ కార్యక్రమం యొక్క స్వంత ప్రెస్ నోట్‌ను పునరావృతం చేస్తోంది, మరియు 'పని దొరికింది' అంటే ఏమిటి అని ఎవరూ చదవలేదు.

Stronger approach మూల నివేదికను, దాని తేదీని మరియు ఎవరు లెక్కించబడ్డారో కనుగొంటుంది. అక్కడే చదువుతుంది 'పని దొరికింది' అంటే ఏదైనా చెల్లింపు ఉన్న పని, ఒక వారపు ఒప్పందం కూడా చేర్పించబడింది. దావును మద్దతుగా కానీ పునర్వ్యాఖ్యానంతో గుర్తిస్తుంది, మరియు ఏ నిర్ణయం మారుతుందో చెప్పుతుంది.

Why the stronger approach works రెండు సమీక్షకులు సంఖ్యను తనిఖీ చేసి, ఇద్దరికీ అది దొరికింది. కానీ దావు అర్థం మారే చోటు ఏదో ఒకరు మాత్రమే చేరారు.

Try a changed situation ఇప్పుడు ఇది ఒక తల్లిదండ్రి మీకు ఫోన్‌లో పంపిన స్కూల్ ఫీజు రీఫండ్ సందేశం. మీరు ఏ భాగాన్ని ముందుగా తీసుకుంటారు?

Make something yourself మూడు వాక్యాల జవాబుకు దావుల పట్టిక తయారు చేయండి. దావు, దాని ప్రభావం, అవసరమైన మూలం, ఇంకా ఏం అనిశ్చితి ఉందో ఇవ్వండి.

Read the primary or official source: Wei et al., Long-form factuality in large language models (arXiv)