Skip to lesson

இயந்திர மொழிபெயர்ப்பு. ஆங்கிலம் மற்றும் ஹிந்தி மதிப்பாய்வு செய்யப்பட்ட பதிப்புகள்.Englishहिन्दी

  1. Learn
  2. See
  3. Try
  4. Make

நேரடி விருப்ப பயிற்சி

What this lesson is about

இரு வழிகளையும் ஒப்பிடுங்கள்: மதிப்பீட்டாளரை பயிற்றுவித்து RL பயன்படுத்துவது, அல்லது ஜோடியிலிருந்து நேரடியாக மாதிரியை நகர்த்துவது.

ஒரு நிறுவனம் உங்கள் குழுவிடம் இனி இந்த பணிக்காக மதிப்பீட்டாளரை உருவாக்கமாட்டோம் என்று சொல்கிறது. அறையில் யாரும் அதற்கான பொருளை புரிந்துகொள்ளவில்லை.

Why this matters

பழைய வழி உங்கள் ஜோடிகளிலிருந்து மதிப்பீட்டாளரை பயிற்றுவித்து, பின்னர் RL மூலம் மாதிரியை மேம்படுத்துகிறது. 2023-ல் வெளியிடப்பட்ட நேரடி விருப்ப பயிற்சி மதிப்பீட்டாளரை நீக்கி, தேர்ந்தெடுக்கப்பட்ட மற்றும் நிராகரிக்கப்பட்ட பதிலிலிருந்து நேரடியாக மாதிரியை நகர்த்துகிறது. உங்கள் மதிப்பீடு மாறவில்லை. ஒரு பழக்கம் இப்போது அதிக செலவாகிறது: சமமாக மதிப்பிடப்பட்ட ஜோடி இந்த வழிக்கு எதுவும் தரவில்லை.

Read the primary or official source: Rafailov et al., Direct Preference Optimization (arXiv)