मशीनने अनुवादित केले आहे. इंग्रजी आणि हिंदी ही पुनरावलोकित आवृत्त्या आहेत.English हिन्दी

Learn
See
Try
Make

बदलण्यापूर्वी त्याचे मोजमाप करा

What this lesson is about

तुमच्या स्वतःच्या पन्नास उदाहरणांवर ते कसे काम करते ते लिहा. तुमच्या बदलाची तुलना करण्यासाठी हा आकडा एकमेव आधार आहे.

तुम लहान मॉडेलला दिलेला सूचना पुन्हा लिहिणार आहात जेणेकरून त्याचे हिंदी उत्तर चांगले होतील. आधी काय कराल?

Why this matters

Hugging Face ची सूचना सांगते की ज्या उदाहरणांवर मॉडेल तयार केले आहे त्याच उदाहरणांवर चाचणी करणे टाळा. गुणांकन छान दिसते पण त्याचा काही अर्थ नसतो. तारीख आणि आवृत्तीशिवाय आकडा कोणाशीही तुलना करू शकत नाही.

तुम्ही तुमच्या स्वतःच्या उदाहरणांवर मॉडेलचे मोजमाप करू शकता आणि नोंदवू शकता ज्यामुळे नंतरच्या वेळेस तुलना करता येईल.

बदलण्यापूर्वी तुमच्या स्वतःच्या पन्नास उदाहरणांवर ते कसे करते ते लिहा.
ज्या कठीण प्रकरणांमध्ये ते अपयशी ठरेल असे तुम्हाला वाटते तेही समाविष्ट करा, नाहीतर गुणांकन जास्त चांगले दिसेल.
गुणांकनासोबत तारीख, मॉडेल आवृत्ती आणि इनपुट देखील नोंदवा.

Task

तुम्ही लहान मॉडेलला दिला जाणारा निर्देश बदलणार आहात, ज्यामुळे त्याची हिंदी उत्तरे सुधारतील.

Weak approach सूचना बदलणे, पाच उत्तर वाचणे, आणि हिंदी आता चांगली आहे असे ठरवणे. जुना सूचना किती गुण मिळाले हे कोणीही लिहिले नाही, त्यामुळे चांगले काय आहे हे ठरवायला काहीच नाही.

Stronger approach सर्वप्रथम तुमच्या पन्नास संदेशांचे गुणांकन करणे, तारीख आणि आवृत्ती लिहिणे, आणि नंतर एक गोष्ट बदलणे.

Why the stronger approach works पहिला गुणांशिवाय 'चांगले' हे फक्त भावना आहे. त्यासोबत बदल हा एक आकडा बनतो जो कोणाला तरी दाखवता येतो.

Try a changed situation एक मैत्रीण तिचा नवीन शिकवण्याचा पद्धत कार्यरत आहे हे सिद्ध करू इच्छिते. ती त्याच दहा प्रश्नांवर चाचणी घेणार आहे ज्यावर ती शिकवली होती. तुम्ही तिला काय सांगाल?

Make something yourself एका मॉडेलचे पहिले मोजमाप करा. तुमचे पन्नास इनपुट, अपेक्षित उत्तर आणि मॉडेलने दिलेले उत्तर लिहा. त्यासोबत तुमचा गुण, तारीख आणि आवृत्ती जोडा.

Read the primary or official source: Hugging Face Evaluate · considerations for model evaluation