- Learn
- See
- Try
- Make
ਗਲਤ ਜਵਾਬ ਨੂੰ ਟੈਸਟ ਵਿੱਚ ਬਦਲੋ
What this lesson is about
ਇੱਕ ਗਲਤ ਜਵਾਬ ਲਵੋ ਅਤੇ ਉਹ ਆਈਟਮ ਲਿਖੋ ਜੋ ਅੱਜ ਫੇਲ ਹੁੰਦਾ ਹੈ ਅਤੇ ਮੁਰੰਮਤ ਤੋਂ ਬਾਅਦ ਪਾਸ ਹੋ ਜਾਵੇਗਾ।
ਤੁਹਾਨੂੰ ਮਿਲਦਾ ਹੈ ਕਿ ਹੇਲਪਲਾਈਨ ਗੋਰਖਪੁਰ ਦਾ ਕਿਰਾਇਆ ਗਲਤ ਦੱਸ ਰਹੀ ਹੈ। ਤੁਹਾਡੀ ਟੀਮ ਕਹਿੰਦੀ ਹੈ ਕਿ ਇਸਨੂੰ ਠੀਕ ਤਰ੍ਹਾਂ ਦਰਜ ਕਰੋ।
Why this matters
ਇੱਕ ਪ੍ਰਕਾਸ਼ਿਤ ਕੋਡ ਚੈੱਕ ਸੈੱਟ ਇਸ ਤਰ੍ਹਾਂ ਬਣਾਇਆ ਜਾਂਦਾ ਹੈ। ਹਰ ਆਈਟਮ ਵਿੱਚ ਇੱਕ ਟੈਸਟ ਹੁੰਦਾ ਹੈ ਜੋ ਮੁਰੰਮਤ ਤੋਂ ਪਹਿਲਾਂ ਫੇਲ ਹੁੰਦਾ ਹੈ ਅਤੇ ਮੁਰੰਮਤ ਤੋਂ ਬਾਅਦ ਪਾਸ। ਇਸ ਤਰ੍ਹਾਂ ਮੁਰੰਮਤ ਸਾਬਤ ਹੁੰਦੀ ਹੈ, ਸਿਰਫ਼ ਦਾਅਵਾ ਨਹੀਂ। ਸ਼ਿਕਾਇਤ ਸਾਬਤ ਨਹੀਂ ਹੋ ਸਕਦੀ ਅਤੇ ਠੀਕ ਨਹੀਂ ਕੀਤੀ ਜਾ ਸਕਦੀ। ਟੈਸਟ ਕਿਸੇ ਨੂੰ ਵੀ ਦਿੱਤਾ ਜਾ ਸਕਦਾ ਹੈ।
Read the primary or official source: Jimenez et al., SWE-bench: Can Language Models Resolve Real-World GitHub Issues? (arXiv)