ತಪ್ಪು ಉತ್ತರವನ್ನು ಪರೀಕ್ಷೆಯಾಗಿ ಮಾಡಿ

What this lesson is about

ಒಂದು ತಪ್ಪು ಉತ್ತರವನ್ನು ತೆಗೆದುಕೊಂಡು, ಇಂದು ವಿಫಲವಾಗುವ ಮತ್ತು ಸರಿಪಡಿಸಿದ ನಂತರ ಪಾಸಾಗುವ ಐಟಂ ಅನ್ನು ಬರೆಯಿರಿ.

ನೀವು ಕಂಡುಕೊಳ್ಳುತ್ತೀರಿ ಹೆಲ್ಪ್‌ಲೈನ್ ಗೋರಖ್‌ಪುರಕ್ಕೆ ತಪ್ಪು ಭಾಡಿಗೆ ನೀಡುತ್ತಿದೆ. ನಿಮ್ಮ ವಲಯವು ಅದನ್ನು ಸರಿಯಾಗಿ ದಾಖಲಿಸಲು ಹೇಳುತ್ತದೆ.

Why this matters

ಪ್ರಕಟಿತ ಕೋಡ್ ಪರಿಶೀಲನಾ ಸೆಟ್ ಈ ರೀತಿಯಾಗಿ ನಿರ್ಮಿಸಲಾಗಿದೆ. ಪ್ರತಿಯೊಂದು ಐಟಂ ಸರಿಪಡಿಸುವ ಮೊದಲು ವಿಫಲವಾಗುವ ಮತ್ತು ನಂತರ ಪಾಸಾಗುವ ಪರೀಕ್ಷೆಯನ್ನು ಹೊಂದಿರುತ್ತದೆ. ಆದ್ದರಿಂದ ಸರಿಪಡಿಸುವುದು ಸಾಬೀತಾಗುತ್ತದೆ, ಕೇವಲ ಹೇಳಲಾಗುವುದಿಲ್ಲ. ದೂರು ಸಾಬೀತಾಗದು ಮತ್ತು ಸರಿಪಡಿಸಲಾಗದು. ಐಟಂ ಯಾರಿಗೂ ನೀಡಬಹುದು.

ಒಂದು ತಪ್ಪು ಉತ್ತರವನ್ನು ಇತರರು ಓಡಿಸಿ ಅದೇ ತಪ್ಪನ್ನು ಕಂಡುಹಿಡಿಯಬಹುದಾದ ಪರೀಕ್ಷಾ ಐಟಂ ಆಗಿ ಮಾಡಿ.

ಪರೀಕ್ಷೆಗೆ ನಿಖರವಾದ ಇನ್‌ಪುಟ್, ನೀವು ನಿರೀಕ್ಷಿಸುವ ಔಟ್‌ಪುಟ್ ಮತ್ತು ನೀವು ವಾಸ್ತವವಾಗಿ ಕಂಡ ಔಟ್‌ಪುಟ್ ಬೇಕು.
ಇನ್‌ಪುಟ್ ಅನ್ನು ಕಡಿಮೆ ಮಾಡಿ, ಇನ್ನೂ ವಿಫಲವಾಗುವ ಅತಿ ಸಣ್ಣದನ್ನು ಉಳಿಸಿ.
ನೀವು ನಿರೀಕ್ಷಿಸುವ ಔಟ್‌ಪುಟ್ ಸರಿಯೆಂದು ಏಕೆ ಹೇಳುತ್ತೀರಿ ಎಂದು ತಿಳಿಸಿ, ಇಲ್ಲದಿದ್ದರೆ ಮುಂದಿನ ವ್ಯಕ್ತಿ ಮಾದರಿಯ ಬದಲು ಐಟಂ ಬಗ್ಗೆ ವಾದ ಮಾಡುತ್ತಾನೆ.

Task

ಒಂದು ಅಂಗಡಿ ಸಹಾಯಕರು 12.3499 ಅನ್ನು ಹಿಂತಿರುಗಿಸಿದರು, ಆದರೆ ಬಿಲ್‌ನಲ್ಲಿ ಪೈಸೆಗಳವರೆಗೆ ಇರಬೇಕು. ಅದನ್ನು ಪರೀಕ್ಷಾ ಐಟಂ ಆಗಿ ಮಾಡಿ.

Weak approach ಸಹಾಯಕರು ಹಣದ ವಿಷಯದಲ್ಲಿ ದುರ್ಬಲರಾಗಿದ್ದಾರೆ ಮತ್ತು ಪೈಸೆ ತಪ್ಪಾಗಿ ನೀಡುತ್ತಾರೆ ಎಂದು ಟಿಪ್ಪಣಿ ಸಲ್ಲಿಸುತ್ತಾರೆ. ಸಂಭಾಷಣೆಯ ಚಿತ್ರವನ್ನು ಜೋಡಿಸಿ ಸರಿಪಡಿಸುವಂತೆ ಕೇಳುತ್ತಾರೆ.

Stronger approach ನಿಖರವಾದ ವಿನಂತಿ, ನಿರೀಕ್ಷಿತ 12.35, ಕಂಡ 12.3499 ಮತ್ತು ಬಿಲ್‌ನಲ್ಲಿ ಎರಡು ಅಂಕಿಗಳ ನಿಯಮವನ್ನು ನೀಡುತ್ತಾರೆ. ಇನ್ನೂ ವಿಫಲವಾಗುವಂತೆ ವಿನಂತಿಯನ್ನು ಒಂದು ಸಾಲಿಗೆ ಕಡಿಮೆ ಮಾಡುತ್ತಾರೆ.

Why the stronger approach works ಎರಡೂ ಅದೇ ತಪ್ಪನ್ನು ವರದಿ ಮಾಡುತ್ತವೆ. ಬಲವಾದದನ್ನು ಮಾತ್ರ ಆ ಸಂಭಾಷಣೆಯನ್ನು ನೋಡದವನು ಕೂಡ ಓಡಿಸಬಹುದು.

Try a changed situation ನಿಮ್ಮ ಐಟಂ ನಾಲ್ಕು ಪುಟಗಳ ಇನ್‌ಪುಟ್‌ನಲ್ಲಿ ವಿಫಲವಾಗಿದೆ. ಸಹೋದ್ಯೋಗಿ ಯಾವ ಭಾಗ ತಪ್ಪಾಗಿದೆ ಎಂದು ತಿಳಿಯಲಾಗುವುದಿಲ್ಲ ಎಂದು ಹೇಳುತ್ತಾನೆ.

Make something yourself ಈ ವಾರ ನೀವು ಕಂಡ ಒಂದು ತಪ್ಪು ಉತ್ತರವನ್ನು ತೆಗೆದುಕೊಳ್ಳಿ. ಅದನ್ನು ಪರೀಕ್ಷಾ ಐಟಂ ಆಗಿ ಬರೆಯಿರಿ: ಇನ್‌ಪುಟ್, ನೀವು ನಿರೀಕ್ಷಿಸುವ ಔಟ್‌ಪುಟ್, ನೀವು ಕಂಡ ಔಟ್‌ಪುಟ್ ಮತ್ತು ಕಾರಣ.

Read the primary or official source: Jimenez et al., SWE-bench: Can Language Models Resolve Real-World GitHub Issues? (arXiv)