ಒಂದು ಉತ್ತರವಲ್ಲ, ಸಂಭಾಷಣೆಯನ್ನು ಪರಿಶೀಲಿಸಿ

What this lesson is about

ಉತ್ತರವನ್ನು ಸಂಭಾಷಣೆಯಲ್ಲಿ ಈಗಾಗಲೇ ನಿರ್ಧರಿಸಿದ ವಿಷಯಗಳ ವಿರುದ್ಧ ಮೌಲ್ಯಮಾಪನ ಮಾಡಿ. ಬಳಕೆದಾರರ ನಿಯಮಗಳು, ಅವರ ತಿದ್ದುಪಡಿ ಮತ್ತು ಅವರು ಆರಿಸಿಕೊಂಡ ಭಾಷೆ.

ಮೊದಲ ತಿರುವಿನಲ್ಲಿ ಗ್ರಾಹಕರು ಹಿಂದಿಯನ್ನು ಕೇಳಿದರು. ನಾಲ್ಕನೇ ತಿರುವು ಸರಿಯಾದ ವಾಸ್ತವಗಳೊಂದಿಗೆ ಪ್ರ流畅 ಇಂಗ್ಲಿಷ್. ನಾಲ್ಕನೇ ತಿರುವಿಗೆ ನೀವು ಹೇಗೆ ಅಂಕ ನೀಡುತ್ತೀರಿ?

Why this matters

ಒಂದು ಉತ್ತರದ ಪರಿಶೀಲನೆ ಮೂರು ತಿರುವುಗಳ ಹಿಂದೆ ಬಳಕೆದಾರನು ಕೇಳಿದ ವಿಷಯವನ್ನು ಮೌನವಾಗಿ ಬಿಟ್ಟುಹೋಗುವ ಸಂಭಾಷಣೆಯನ್ನು ಪಾಸುಮಾಡುತ್ತದೆ.

ಪ್ರತಿ ಉತ್ತರವನ್ನು ಸಂಭಾಷಣೆಯಲ್ಲಿ ಈಗಾಗಲೇ ನಿಗದಿಪಡಿಸಿದ ನಿಯಮಗಳು, ತಿದ್ದುಪಡಿ ಮತ್ತು ವಾಸ್ತವಗಳ ವಿರುದ್ಧ ಮೌಲ್ಯಮಾಪನ ಮಾಡಿ.

ಬಳಕೆದಾರನು ಬದಲಾಯಿಸುವವರೆಗೆ ನಿಗದಿಪಡಿಸಿದ ಸೂಚನೆ ಜಾರಿಯಲ್ಲಿರುತ್ತದೆ.
ಪ್ರತಿ ಉತ್ತರವನ್ನು ಅದರ ಸ್ವತಂತ್ರವಾಗಿ ಅಲ್ಲ, ಹಿಂದಿನ ತಿರುವುಗಳೊಂದಿಗೆ ಪರಿಶೀಲಿಸಿ.
ಸಂಭಾಷಣೆ ಮೊದಲ ಬಾರಿಗೆ ಉಲ್ಲಂಘಿಸಿದ ತಿರುವನ್ನು ಗುರುತಿಸಿ, ಕೊನೆಯದನ್ನು ಅಲ್ಲ.

Task

ವಿದ್ಯಾರ್ಥಿವೃಂದಿ ಫಾರ್ಮ್ ಬಗ್ಗೆ ನಾಲ್ಕು ತಿರುವುಗಳ ಸಂಭಾಷಣೆ. ಮೊದಲ ತಿರುವಿನಲ್ಲಿ ಬಳಕೆದಾರರು ಹಿಂದಿಯನ್ನು ಕೇಳಿದರು. ಮೂರನೇ ತಿರುವಿನಲ್ಲಿ ಅವರು ಕೊನೆಯ ದಿನಾಂಕವನ್ನು ಸರಿಪಡಿಸಿದರು, ಮತ್ತು ಸಹಾಯಕರು ಅದನ್ನು ಒಪ್ಪಿಕೊಂಡರು.

Weak approach ನಾಲ್ಕನೇ ತಿರುವನ್ನು ತೆರೆಯುತ್ತದೆ, ಅದರ ವಾಸ್ತವಗಳನ್ನು ಸೂಚನೆಯೊಂದಿಗೆ ಪರಿಶೀಲಿಸಿ ಸರಿಯೆಂದು ಕಂಡು ಅದನ್ನು ಅಂಗೀಕರಿಸುತ್ತದೆ. ಮೊದಲ ತಿರುವು ಮೂರು ಸ್ಕ್ರೀನ್ ಮೇಲಿದೆ ಮತ್ತು ಅದಕ್ಕೆ ಮತ್ತೆ ಹಿಂದಕ್ಕೆ ಹೋಗುವುದಿಲ್ಲ.

Stronger approach ಮೊದಲಿನಿಂದ ನಾಲ್ಕನೇ ತಿರುವುಗಳವರೆಗೆ ಕ್ರಮವಾಗಿ ಓದಿ ಪ್ರತಿ ತಿರುವು ಮುಂದಕ್ಕೆ ಏನು ತೆಗೆದುಕೊಂಡು ಹೋಗಬೇಕೆಂದು ಬರೆಯುತ್ತದೆ. ನಾಲ್ಕನೇ ತಿರುವು ಸರಿಪಡಿಸಿದ ದಿನಾಂಕವನ್ನು ಪುನರಾವರ್ತಿಸುತ್ತದೆ, ಅದು ಸರಿಯಾಗಿದೆ, ಮತ್ತು ಉತ್ತರವನ್ನು ಇಂಗ್ಲಿಷ್‌ನಲ್ಲಿ ನೀಡುತ್ತದೆ, ಮೊದಲ ತಿರುವು ಅದನ್ನು ನಿರಾಕರಿಸಿತ್ತು. ನಾಲ್ಕನೇ ತಿರುವನ್ನು ವಿರಾಮವಾಗಿ ಗುರುತಿಸಿ ಮೊದಲ ತಿರುವಿನ ಸಾಲನ್ನು ಉಲ್ಲೇಖಿಸುತ್ತದೆ.

Why the stronger approach works ನಾಲ್ಕನೇ ತಿರುವಿನ ವಾಸ್ತವಗಳು ಎರಡೂ ಪರಿಶೀಲನೆಗಳಲ್ಲಿ ಸರಿಯಾಗಿದ್ದವು. ಅದು ಬಿಟ್ಟುಬಿಟ್ಟ ಸೂಚನೆ ಮೂರು ಸ್ಕ್ರೀನ್ ಮೇಲಿದ್ದಿತು, ಮತ್ತು ಅದನ್ನು ಮೊದಲ ತಿರುವಿನಿಂದ ಓದಿದ ವಿಮರ್ಶಕನೇ ನೋಡಿದರು.

Try a changed situation ನೀವು ಈಗ ಸಂಭಾಷಣೆ ಅಲ್ಲ, ಸಹಾಯಕನ ಉಪಕರಣದ ಹಂತಗಳನ್ನು ಪರಿಶೀಲಿಸುತ್ತಿದ್ದೀರಿ. ಯಾವ ನಿಯಮ ಇನ್ನೂ ಅನ್ವಯಿಸುತ್ತದೆ?

Make something yourself ನೀವು ಸಹಾಯಕನೊಂದಿಗೆ ನಡೆಸಿದ ನಾಲ್ಕು ತಿರುವುಗಳ ಸಂಭಾಷಣೆಯನ್ನು ತೆಗೆದುಕೊಳ್ಳಿ. ಪ್ರತಿ ತಿರುವಿಗೆ ಹಿಂದಿನ ತಿರುವಿನಿಂದ ಮುಂದುವರಿಯಬೇಕಾದ ಒಂದು ವಿಷಯವನ್ನು ಬರೆಯಿರಿ ಮತ್ತು ಅದು ಮುಂದುವರಿದಿದೆಯೇ ಎಂದು ಹೇಳಿ.

Read the primary or official source: Anthropic HH-RLHF