quest-trainer-set-the-standard v1

Set the scale and write the gold

पैमाना बैठाएँ और आदर्श उत्तर लिखें

The round's note: the ten items, the spread you found, the anchor you rewrote, and the date.

दौर का नोट: वे दस सवाल, मिला हुआ फैलाव, दोबारा लिखा गया लंगर, और तारीख़।

Published
2026-09-13
Scored
0 to 5 on each of three criteria

How to read the scale

Each rule below is scored from 0 to 5. Three points carry a written line: 0, 3 and 5. Work that sits between two of them takes the point in between.

A reviewer records one of three marks. This is the whole mapping:

हर नियम 0 से 5 तक आँका जाता है। 0, 3 और 5 के लिए लिखी हुई पंक्ति है। बीच का काम बीच का अंक लेता है। जाँचने वाला तीन में से एक निशान दर्ज करता है: 0-1 का अर्थ नहीं, 2-3 का अर्थ कुछ हद तक, और 4-5 का अर्थ पूरा।

Where these rules come from

Every rule below is a line out of this quest’s own lessons — either the work sample’s instruction or a thing one of its lessons teaches. Nothing was written for this page. You are never judged against a rule the lesson did not give you.

नीचे हर नियम इसी पड़ाव के पाठों की अपनी पंक्ति है — या तो काम के नमूने का निर्देश, या किसी पाठ की सिखाई हुई बात। इस पन्ने के लिए कुछ नया नहीं लिखा गया।

What is weaker here than it should be. The 0, 3 and 5 lines on this rubric are a general frame, not a sentence written for each rule. They will be written properly for any rule that two reviewers turn out to apply differently.

Rule 1

Give the count of items and of people, and name no person anywhere in the note.

सवालों की गिनती और लोगों की गिनती लिखें, और नोट में कहीं किसी का नाम न लिखें।

This is the work sample's own instruction, from the lesson trainer-run-a-calibration-round.

  1. Score 0. None of the parts named in this rule are in the sample.

    इस नियम में बताए गए हिस्सों में से कोई भी नमूने में नहीं है।

  2. Score 3. Some of the parts are there. At least one named part is missing.

    कुछ हिस्से मौजूद हैं। बताए गए हिस्सों में से कम से कम एक नहीं है।

  3. Score 5. Every part named in this rule is in the sample, and each one is filled in.

    इस नियम में बताया गया हर हिस्सा नमूने में है, और हर एक भरा हुआ है।

Rule 2

Send everyone the same ten items, marked alone, before anybody compares notes.

सबको वही दस सवाल भेजें, हर कोई अकेले निशान लगाए, और तब तक कोई आपस में बात न करे।

This is a line the lesson trainer-run-a-calibration-round teaches.

  1. Score 0. The sample does not do this anywhere a reader can point to.

    नमूने में ऐसी कोई जगह नहीं जहाँ पाठक दिखा सके कि यह हुआ है।

  2. Score 3. The sample does this in one place. Elsewhere it does not.

    नमूना एक जगह यह करता है। बाकी जगह नहीं करता।

  3. Score 5. The sample does this everywhere the rule applies, and a reader can point at each place.

    जहाँ-जहाँ यह नियम लगता है, नमूना हर जगह यह करता है, और पाठक हर जगह दिखा सकता है।

Rule 3

Rewrite the anchor the team split on, then send the same ten again.

जिस लंगर पर टीम बँटी, उसे दोबारा लिखें, फिर वही दस सवाल दोबारा भेजें।

This is a line the lesson trainer-run-a-calibration-round teaches.

  1. Score 0. The sample does not do this anywhere a reader can point to.

    नमूने में ऐसी कोई जगह नहीं जहाँ पाठक दिखा सके कि यह हुआ है।

  2. Score 3. The sample does this in one place. Elsewhere it does not.

    नमूना एक जगह यह करता है। बाकी जगह नहीं करता।

  3. Score 5. The sample does this everywhere the rule applies, and a reader can point at each place.

    जहाँ-जहाँ यह नियम लगता है, नमूना हर जगह यह करता है, और पाठक हर जगह दिखा सकता है।

A worked example at this standard

इस स्तर का एक बना हुआ उदाहरण

This is a reference, not an answer. Your brief is your own, and nobody is compared to this page. Hold your work beside it and read the notes in the margin.

यह एक संदर्भ है, जवाब नहीं। आपका काम आपका अपना है, और इस पन्ने से किसी की तुलना नहीं होती। अपना काम इसके बगल में रखें और हाशिये की टिप्पणियाँ पढ़ें।

Written for this page on 2026-09-14. No person or place in it is real.

यह इस पन्ने के लिए 2026-09-14 को लिखा गया। इसमें कोई व्यक्ति या जगह असली नहीं है।

The brief

काम क्या था

A team of three in Jhansi rates replies from a Hindi chat helper that answers water-bill complaints for the town. The scale has three levels: Settles, Half settles, Does not settle. The client says the three batches do not read like one batch. Run one round on ten replies and write its note.

झाँसी की तीन लोगों की टीम एक हिन्दी चैट सहायक के जवाब परखती है। यह सहायक शहर की पानी के बिल की शिकायतें सुनता है। पैमाने में तीन दर्जे हैं: निपटाता है, आधा निपटाता है, नहीं निपटाता। ग्राहक कहता है कि तीनों के बैच एक बैच जैसे नहीं पढ़े जाते। दस जवाबों पर एक दौर चलाएँ और उसका नोट लिखें।

The standard

स्तर

The note counts 10 items and 3 people, gives agreement with chance removed, and dates both rounds.

नोट में 10 सवाल और 3 लोग गिने हैं, संयोग घटाकर सहमति दी है, और दोनों दौरों की तारीख़ है।

Meets the standard

स्तर पर खरा

Round note, 3 September 2026. Items: 10 replies from the water-bill helper, numbered 1 to 10, each answering one real complaint. People: 3. Each person received the same ten by message at 10 in the morning and marked alone. No discussion was allowed until all three sheets were in, at 1 in the afternoon.

दौर का नोट, 3 सितंबर 2026। सवाल: पानी के बिल वाले सहायक के 10 जवाब, 1 से 10 तक गिने हुए, हर एक असली शिकायत का जवाब। लोग: 3। हर व्यक्ति को वही दस सुबह 10 बजे संदेश से मिले, और सबने अकेले निशान लगाए। दोपहर 1 बजे तीनों पर्चे आने तक कोई बातचीत नहीं हुई।

Scale used: 3 levels. Settles, Half settles, Does not settle. The written anchors from the guideline were sent with the items, unchanged.

इस्तेमाल हुआ पैमाना: 3 दर्जे। निपटाता है, आधा निपटाता है, नहीं निपटाता। दिशानिर्देश के लिखे हुए लंगर सवालों के साथ बिना बदले भेजे गए।

Spread: all three marks matched on 7 of 10 items. Item 7 differed by one level. Items 5 and 9 carried all three levels, from Does not settle to Settles. Agreement with chance taken out, across the three: 0.59. That figure describes the round and the written scale, not any person on it.

फैलाव: 10 में से 7 सवालों पर तीनों निशान मिले। सवाल 7 पर एक दर्जे का फ़र्क़। सवाल 5 और 9 पर तीनों दर्जे आए, नहीं निपटाता से निपटाता तक। संयोग घटाने के बाद तीनों की सहमति: 0.59। यह आँकड़ा दौर और लिखे हुए पैमाने के बारे में है, किसी व्यक्ति के बारे में नहीं।

What split them: both 5 and 9 give the right office and its hours, but no complaint number. The old anchor for Settles read: 'the complaint is answered and the person knows what to do next'. One reader took the office and hours as 'what to do next'. Another took the missing number as leaving the complaint open.

बँटवारा कहाँ हुआ: 5 और 9, दोनों जवाब सही दफ़्तर और उसका समय बताते हैं, पर शिकायत नंबर नहीं। ‘निपटाता है’ का पुराना लंगर था: ‘शिकायत का जवाब मिल गया और व्यक्ति जानता है कि आगे क्या करना है’। एक ने दफ़्तर और समय को ही ‘आगे क्या करना है’ मान लिया। दूसरे ने नंबर न होने को शिकायत का खुला रह जाना माना।

Rewritten anchor for Settles: 'the reply gives the next step, the place, and the complaint number.' Its second line: 'If any one of the three is missing, mark Half settles.' The other two anchors were left as they were.

‘निपटाता है’ का दोबारा लिखा लंगर: ‘जवाब अगला कदम, जगह, और शिकायत नंबर देता है।’ उसकी दूसरी पंक्ति: ‘तीनों में से कोई एक भी न हो, तो आधा निपटाता है लिखें।’ बाकी दो लंगर जैसे थे वैसे ही रहे।

Second round, 5 September 2026: the same ten items, the same three people, marked alone again with the new anchor. Items 5 and 9 closed to one level each. Agreement with chance taken out: 0.79. Item 7 still differs by one level and is the next thing to look at.

दूसरा दौर, 5 सितंबर 2026: वही दस सवाल, वही तीन लोग, नए लंगर के साथ फिर अकेले निशान। सवाल 5 और 9 सिमटकर एक-एक दर्जे पर आ गए। संयोग घटाकर सहमति: 0.79। सवाल 7 पर अब भी एक दर्जे का फ़र्क़ है, और अगली नज़र उसी पर जाएगी।

Nobody is named in this note, and no sheet is marked as anyone's. The two numbers belong to the round. The second one is the only thing the next round can be compared with.

इस नोट में किसी का नाम नहीं है, और कोई पर्चा किसी के नाम से नहीं है। दोनों आँकड़े दौर के हैं, और दूसरा आँकड़ा ही वह चीज़ है जिससे अगला दौर मिलाया जा सकता है।

  1. Rule 1Met

    नियम 1पूरा

    'Items: 10' and 'People: 3' open the note, and the last paragraph says no sheet is marked as anyone's.

    ‘सवाल: 10’ और ‘लोग: 3’ से नोट खुलता है, और आख़िरी अनुच्छेद कहता है कि कोई पर्चा किसी के नाम से नहीं है।

  2. Rule 2Met

    नियम 2पूरा

    'Received the same ten by message at 10 in the morning and marked alone' comes before any spread is reported.

    ‘वही दस सुबह 10 बजे संदेश से मिले, और सबने अकेले निशान लगाए’ किसी भी फैलाव से पहले लिखा है।

  3. Rule 3Met

    नियम 3पूरा

    The new Settles line is quoted in full, and 5 September brings 'the same ten items' back with 0.79.

    ‘निपटाता है’ की नई पंक्ति पूरी उद्धृत है, और 5 सितंबर को ‘वही दस सवाल’ 0.79 के साथ लौटते हैं।

Falls short, and where

कहाँ कम पड़ता है

Round note, 3 September. Ten replies from the water-bill helper, three of us. I posted the ten in our group at 10 in the morning. Everyone was asked to mark them on their own. To save time, each person posted their marks in the group as soon as they finished.

दौर का नोट, 3 सितंबर। पानी के बिल वाले सहायक के दस जवाब, हम तीन लोग। मैंने सुबह 10 बजे दसों जवाब हमारे ग्रुप में डाले और सबसे कहा कि अपने-अपने हिसाब से निशान लगाएँ। समय बचाने के लिए, जिसने जैसे ही पूरा किया, अपने निशान ग्रुप में डाल दिए।

Result: we matched on 7 of 10. Items 5 and 9 went every way. Both are replies that name the office and its hours but give no complaint number. We talked it through on a call in the afternoon and agreed both should be Half settles.

नतीजा: 10 में से 7 पर हम मिले। सवाल 5 और 9 हर तरफ़ गए। दोनों जवाब दफ़्तर और उसका समय बताते हैं, पर शिकायत नंबर नहीं देते। दोपहर में फ़ोन पर बात करके हमने तय किया कि दोनों को आधा निपटाता है लिखा जाए।

Anchor change: I added a line to Settles saying the complaint number must be present. Sent the updated anchors to the group the same evening.

लंगर में बदलाव: मैंने ‘निपटाता है’ में एक पंक्ति जोड़ी कि शिकायत नंबर होना ज़रूरी है। उसी शाम बदले हुए लंगर ग्रुप में भेज दिए।

Next step: on 5 September I sent ten fresh replies from this week's batch with the new anchors. That way the round is not wasted work. Those marks are still coming in. Will report the match on the new ten when all three are back.

अगला कदम: 5 सितंबर को मैंने इस हफ़्ते के बैच से दस नए जवाब नए लंगरों के साथ भेजे। ताकि दौर का काम बेकार न जाए। वे निशान अभी आ रहे हैं। तीनों के आने पर नए दस पर मेल बताऊँगा।

  1. Rule 1Met

    नियम 1पूरा

    'Ten replies' and 'three of us' give both counts, and nobody in the group is named or singled out.

    ‘दस जवाब’ और ‘हम तीन लोग’ दोनों गिनतियाँ देते हैं, और ग्रुप में किसी का नाम या अलग ज़िक्र नहीं है।

  2. Rule 2Partly

    नियम 2कुछ हद तक

    'Posted their marks in the group as soon as they finished' shows later readers the earlier marks first.

    ‘जिसने जैसे ही पूरा किया, अपने निशान ग्रुप में डाल दिए’ से बाद वालों को पहले वाले के निशान पहले दिख जाते हैं।

  3. Rule 3Partly

    नियम 3कुछ हद तक

    Settles got a new line, but 'ten fresh replies from this week's batch' never re-tests items 5 and 9.

    ‘निपटाता है’ में नई पंक्ति तो जुड़ी, पर ‘दस नए जवाब’ सवाल 5 और 9 को दोबारा कभी नहीं परखते।

What to take from the two

दोनों को साथ रखकर क्या दिखता है

A round measures the written scale, so the same ten have to come back after the anchor changes. New items would measure something else.

दौर लिखे हुए पैमाने को नापता है, इसलिए लंगर बदलने के बाद वही दस सवाल लौटने चाहिए। नए सवाल किसी और चीज़ को नापेंगे।