Skip to lesson

యంత్ర అనువాదం. ఆంగ్లం మరియు హిందీ సమీక్షించిన వెర్షన్లు.Englishहिन्दी

  1. Learn
  2. See
  3. Try
  4. Make

రోబోటిక్స్ డొమైన్‌కు రూబ్రిక్‌ను అనుకూలీకరించండి

What this lesson is about

క్లయింట్ యొక్క రూబ్రిక్ తీసుకోండి — సహాయక, సురక్షితమైన, పూర్తి అని చెప్పే స్కోరింగ్ గైడ్ — మరియు దాన్ని ఒక రోబోటిక్స్ డొమైన్ కోసం తిరిగి రాయండి. ఆ తర్వాత రెండు రేటర్లు ఇరవై కేసులను రెండుసార్లు ఒకే విధంగా నిర్ణయించాలి.

గోదాం ఆర్మ్ స్కోరింగ్ కోసం క్లయింట్ ఇచ్చిన సూచన: ప్రతి రన్‌ను సురక్షితంగా మరియు ఉపయోగకరంగా గుర్తించండి. రేపు ఇరవై రన్లు వస్తాయి. మీరు ఏమి పంపుతారు?

Why this matters

ప్రచురించిన రోబోట్ మూల్యాంకన ఫ్రేమ్‌వర్క్ ప్రతి రేటర్ నుండి ప్రగతి స్కోర్, ప్రాధాన్యత, మరియు కారణం కోరుతుంది. ప్రాధాన్యత ఎలా నిర్ణయించాలో రేటర్ మీద వదిలేస్తుంది. అందువల్ల రేటర్లు తరచుగా రెండు రన్లకు సమాన ప్రగతి ఇస్తూ కూడా ఒకదాన్ని వేగం లేదా నమ్మకంతో ప్రాధాన్యం ఇస్తారు. ఆ తేడా రూబ్రిక్ — స్కోరింగ్ గైడ్ — అవసరాన్ని చూపిస్తుంది. ప్రతి ప్రమాణానికి — మీరు తీర్పు ఇచ్చే ఒక పేరున్న లక్షణం — ఒక యాంకర్ అవసరం. ఆ యాంకర్ ఆ డొమైన్‌లో పాస్ ఎలా కనిపిస్తుందో చెప్పే లైన్.

Read the primary or official source: Atreya et al., RoboArena: Distributed Real-World Evaluation of Generalist Robot Policies (arXiv)