Skip to lesson

യന്ത്രം വിവർത്തനം ചെയ്തതാണ്. ഇംഗ്ലീഷ്, ഹിന്ദി പരിശോധിച്ച പതിപ്പുകളാണ്.Englishहिन्दी

  1. Learn
  2. See
  3. Try
  4. Make

മാർക്ക് ചെയ്യുന്ന മോഡൽ പരിശോധിക്കുക

What this lesson is about

നിങ്ങളുടെ സ്വന്തം മാർക്കുകളുമായി ഒരു മോഡൽ ഗ്രേഡറെ അളക്കുക, അതിന്റെ മൂല്യം ഇല്ലാതാക്കുന്ന മൂന്ന് ശീലങ്ങൾ പരിശോധിക്കുക.

നിങ്ങളുടെ വാങ്ങുന്നവൻ ആഴ്ചയിൽ രണ്ട് ആയിരം മറുപടികൾ മാർക്ക് ചെയ്യാൻ മോഡൽ നൽകുന്നു. നിങ്ങൾ എവിടെ നിന്നാണ് തുടങ്ങുന്നത്?

Why this matters

ഒരു മോഡൽ ഒരു ഗ്രൂപ്പിനേക്കാൾ വളരെ കൂടുതൽ ഉത്തരങ്ങൾ മാർക്ക് ചെയ്യാൻ കഴിയും. പ്രസിദ്ധീകരിച്ച ഒരു പഠനത്തിൽ, ഒരു ശക്തമായ മോഡൽ ആളുകളുമായി എൺപത് ശതമാനം വരെ ഒത്തിരിക്കുന്നു എന്ന് കണ്ടെത്തി. രണ്ട് ആളുകൾക്ക് അത്രയധികം ഒത്തിരിക്കുന്നു. ആ പഠനം പരിശോധിക്കേണ്ട ശീലങ്ങളും പറയുന്നു: നീണ്ട ഉത്തരങ്ങൾ വിജയിക്കുന്നു, ആദ്യമായി കാണിച്ച ഉത്തരങ്ങൾ വിജയിക്കുന്നു, മോഡൽ സ്വന്തം എഴുത്ത് ഇഷ്ടപ്പെടുന്നു.

Read the primary or official source: Zheng et al., Judging LLM-as-a-Judge with MT-Bench and Chatbot Arena (arXiv)