All learning paths Learn See Try Make ಬದಲಿಸುವ ಮೊದಲು ಅದನ್ನು ಅಳೆಯಿರಿ What this lesson is about ನಿಮ್ಮ ಸ್ವಂತ ಐವತ್ತು ಉದಾಹರಣೆಗಳಲ್ಲಿ ಅದು ಹೇಗೆ ಕಾರ್ಯನಿರ್ವಹಿಸುತ್ತದೆ ಎಂದು ಬರೆಯಿರಿ. ನಿಮ್ಮ ಬದಲಾವಣೆಯನ್ನು ಅಳೆಯಲು ಆ ಸಂಖ್ಯೆ ಮಾತ್ರವೇ ಮಾನದಂಡ.
ನೀವು ಒಂದು ಸಣ್ಣ ಮಾದರಿಗೆ ನೀಡುವ ಸೂಚನೆಯನ್ನು ಮರುಬರಹ ಮಾಡಲು ಹೋಗುತ್ತಿದ್ದೀರಿ, ಇದರಿಂದ ಅದರ ಹಿಂದಿ ಉತ್ತರಗಳು ಉತ್ತಮವಾಗುತ್ತವೆ. ಮೊದಲೇ ಏನು ಮಾಡಬೇಕು?
A ಅದನ್ನು ಮರುಬರಹಿಸಿ, ಐದು ಉತ್ತರಗಳನ್ನು ಓದಿ, ಸ್ಪಷ್ಟವಾಗಿ ಉತ್ತಮವಾದಾಗ ಅಂಕೆಯನ್ನು ಬರೆಯಿರಿ. B ಬದಲಿಸುವ ಮೊದಲು ನಿಮ್ಮ ಸ್ವಂತ ಐವತ್ತು ಉದಾಹರಣೆಗಳ ಮೇಲೆ ಅದು ಹೇಗೆ ಕಾರ್ಯನಿರ್ವಹಿಸುತ್ತದೆ ಎಂದು ಬರೆಯಿರಿ. C ನೀವು ಸೂಚನೆಯನ್ನು ಬರೆಯಲು ಬಳಸಿದ ಐವತ್ತು ಸಂದೇಶಗಳ ಮೇಲೆ ಅಂಕೆಯನ್ನು ನೀಡಿ, ಅವು ಸಿದ್ಧವಾಗಿವೆ.
Check my recall Why this matters Hugging Face ನ ಮಾರ್ಗದರ್ಶನವು ಅದೇ ಉದಾಹರಣೆಗಳ ಮೇಲೆ ಪರೀಕ್ಷಿಸುವುದನ್ನು ತಡೆಯುತ್ತದೆ, ಏಕೆಂದರೆ ಅಂಕಗಳು ಅದ್ಭುತವಾಗಿ ಕಾಣಬಹುದು ಆದರೆ ಅರ್ಥವಿಲ್ಲ. ದಿನಾಂಕ ಮತ್ತು ಆವೃತ್ತಿ ಇಲ್ಲದ ಸಂಖ್ಯೆ ಯಾವುದಕ್ಕೂ ಹೋಲಿಕೆ ಆಗುವುದಿಲ್ಲ.
ನೀವು ಮಾದರಿಯನ್ನು ನಿಮ್ಮ ಸ್ವಂತ ಉದಾಹರಣೆಗಳ ಮೇಲೆ ಅಳೆಯಬಹುದು ಮತ್ತು ಆ ಅಳತೆಯನ್ನು ದಾಖಲಿಸಬಹುದು, ನಂತರದ ಬಾರಿ ಹೋಲಿಕೆ ಮಾಡಲು.
Hugging Face ನ ಮಾರ್ಗದರ್ಶನವು ಅದೇ ಉದಾಹರಣೆಗಳ ಮೇಲೆ ಪರೀಕ್ಷಿಸುವುದನ್ನು ತಡೆಯುತ್ತದೆ, ಏಕೆಂದರೆ ಅಂಕಗಳು ಅದ್ಭುತವಾಗಿ ಕಾಣಬಹುದು ಆದರೆ ಅರ್ಥವಿಲ್ಲ. ದಿನಾಂಕ ಮತ್ತು ಆವೃತ್ತಿ ಇಲ್ಲದ ಸಂಖ್ಯೆ ಯಾವುದಕ್ಕೂ ಹೋಲಿಕೆ ಆಗುವುದಿಲ್ಲ.
ಬದಲಿಸುವ ಮೊದಲು ನಿಮ್ಮ ಸ್ವಂತ ಐವತ್ತು ಉದಾಹರಣೆಗಳ ಮೇಲೆ ಅದು ಹೇಗೆ ಕಾರ್ಯನಿರ್ವಹಿಸುತ್ತದೆ ಎಂದು ಬರೆಯಿರಿ. ನೀವು ತಪ್ಪು ಮಾಡಬಹುದು ಎಂದು ನಿರೀಕ್ಷಿಸುವ ಕಠಿಣ ಪ್ರಕರಣಗಳನ್ನು ಸೇರಿಸಿ, ಇಲ್ಲದಿದ್ದರೆ ಅಂಕಗಳು ಅದನ್ನು ಹೆಚ್ಚಾಗಿ ಮೆಚ್ಚಿಸುವಂತೆ ಕಾಣುತ್ತದೆ. ಅಂಕದ ಜೊತೆಗೆ ದಿನಾಂಕ, ಮಾದರಿ ಆವೃತ್ತಿ ಮತ್ತು ಇನ್ಪುಟ್ಗಳನ್ನು ಕೂಡ ದಾಖಲಿಸಿ. Task ನೀವು ಸಣ್ಣ ಮಾದರಿಗೆ ನೀಡುವ ಸೂಚನೆಯನ್ನು ಬದಲಾಯಿಸಲು ಹೋಗುತ್ತಿದ್ದೀರಿ, ಅದರ ಹಿಂದಿ ಉತ್ತರಗಳನ್ನು ಸುಧಾರಿಸಲು.
Weak approach ಸೂಚನೆಯನ್ನು ಬದಲಾಯಿಸಿ, ಐದು ಉತ್ತರಗಳನ್ನು ಓದಿ, ಈಗ ಹಿಂದಿ ಉತ್ತಮವಾಗಿದೆ ಎಂದು ನಿರ್ಧರಿಸುವುದು. ಹಳೆಯ ಸೂಚನೆಯ ಅಂಕೆಯನ್ನು ಯಾರೂ ದಾಖಲಿಸಿರಲಿಲ್ಲ, ಆದ್ದರಿಂದ 'ಉತ್ತಮ' ಎಂದು ಹೋಲಿಸಲು ಏನೂ ಇಲ್ಲ.
Stronger approach ಮೊದಲು ನಿಮ್ಮ ಸ್ವಂತ ಐವತ್ತು ಸಂದೇಶಗಳನ್ನು ಅಂಕಮಾಡಿ, ದಿನಾಂಕ ಮತ್ತು ಆವೃತ್ತಿಯನ್ನು ಬರೆಯಿರಿ, ನಂತರ ಮಾತ್ರ ಒಂದು ವಿಷಯವನ್ನು ಬದಲಾಯಿಸಿ.
Why the stronger approach works ಮೊದಲ ಅಂಕ ಇಲ್ಲದೆ 'ಉತ್ತಮ' ಎಂಬುದು ಕೇವಲ ಭಾವನೆ. ಅದನ್ನು ಹೊಂದಿದಾಗ, ಬದಲಾವಣೆ ಒಂದು ಸಂಖ್ಯೆಯಾಗುತ್ತದೆ ಮತ್ತು ಯಾರಿಗಾದರೂ ತೋರಿಸಬಹುದು.
Try a changed situation ಒಬ್ಬ ಗೆಳತಿ ತನ್ನ ಹೊಸ ಪಾಠದ ವಿಧಾನವು ಕೆಲಸ ಮಾಡುತ್ತದೆ ಎಂದು ಸಾಬೀತುಪಡಿಸಲು ಬಯಸುತ್ತಾಳೆ. ಅವಳು ಅದೇ ಹತ್ತು ಪ್ರಶ್ನೆಗಳ ಮೇಲೆ ಪರೀಕ್ಷೆ ಮಾಡಲು ಯೋಜಿಸುತ್ತಾಳೆ, ಅವುಗಳಿಂದಲೇ ಪಾಠ ನೀಡಿದ್ದಾಳೆ. ನೀವು ಅವಳಿಗೆ ಏನು ಹೇಳುತ್ತೀರಿ?
Make something yourself ಒಂದು ಮಾದರಿಯ ಮೊದಲ ಅಳತೆಯನ್ನು ಮಾಡಿ. ನಿಮ್ಮ ಐವತ್ತು ಇನ್ಪುಟ್ಗಳನ್ನು, ನಿರೀಕ್ಷಿತ ಉತ್ತರವನ್ನು ಮತ್ತು ಮಾದರಿ ನೀಡಿದ ಉತ್ತರವನ್ನು ಬರೆಯಿರಿ. ನಿಮ್ಮ ಅಂಕ, ದಿನಾಂಕ ಮತ್ತು ಆವೃತ್ತಿಯನ್ನು ಸೇರಿಸಿ.
Read the primary or official source: Hugging Face Evaluate · considerations for model evaluation