Skip to lesson

ಯಂತ್ರ ಅನುವಾದಿತ. ಇಂಗ್ಲಿಷ್ ಮತ್ತು ಹಿಂದಿ ಪರಿಶೀಲಿತ ಆವೃತ್ತಿಗಳು.Englishहिन्दी

  1. Learn
  2. See
  3. Try
  4. Make

ಪರಿಶೀಲನೆ ಸುತ್ತು ನಡೆಸಿ ಮತ್ತು ಮಾಪಕವನ್ನು ಮರುಹೊಂದಿಸಿ

What this lesson is about

ಒಂದು ತಂಡಕ್ಕೆ ಅದೇ ಹತ್ತು ಐಟಂಗಳನ್ನು ನೀಡಿ, ಅವರ ಗುರುತುಗಳು ಎಷ್ಟು ದೂರವಿರುವುದನ್ನು ಅಳೆಯಿರಿ. ನಂತರ ಅವರನ್ನು ವಿಭಜಿಸಿದ ಆಂಕರ್ ಅನ್ನು ಮರುಬರೆಯಿರಿ.

ನಿಮ್ಮ ತಂಡದ ನಾಲ್ಕು ಜನರು ಒಪ್ಪಂದವಾಗದ ಬ್ಯಾಚ್‌ಗಳನ್ನು ನೀಡುತ್ತಾರೆ. ಗ್ರಾಹಕರು ಇದನ್ನು ತಿಳಿಸಿದ್ದಾರೆ. ನೀವು ಸುತ್ತನ್ನು ಹೇಗೆ ಪ್ರಾರಂಭಿಸುತ್ತೀರಿ?

Why this matters

ಎರಡು ಎಚ್ಚರಿಕೆಯುಳ್ಳ ಜನರು ಒಂದೇ ವಸ್ತುವನ್ನು ಅಳೆಯುವಾಗ ನಿರೀಕ್ಷೆಗಿಂತ ಹೆಚ್ಚು ಭಿನ್ನವಾಗಿರುತ್ತಾರೆ. ಪ್ರಕಟಿತ ಸುರಕ್ಷತಾ ಯೋಜನೆಯಲ್ಲಿ ನಾಲ್ಕು ವಿಮರ್ಶಕರು ಒಂದೇ ಪ್ರಕರಣಗಳನ್ನು ಅಳೆಯುವಾಗ, ಸಂಭಾವ್ಯತೆಯನ್ನು ತೆಗೆದುಹಾಕಿದ ನಂತರ ಅವರ ಒಪ್ಪಂದ 0.32 ಆಗಿತ್ತು. ರೇಟಿಂಗ್ ಅನ್ನು ಎರಡು ಮಟ್ಟಗಳಿಗೆ ಕಡಿಮೆ ಮಾಡಿದಾಗ ಅದು 0.49ಕ್ಕೆ ಏರಿತು. ಆ ಸಂಖ್ಯೆ ಬರೆಯಲಾದ ಮಾಪಕದ ಬಗ್ಗೆ ಮತ್ತು ಎರಡನೇ ಸುತ್ತಿನೊಂದಿಗೆ ಹೋಲಿಕೆ ಮಾಡಲು ಏಕೈಕ ಅಂಶವಾಗಿದೆ.

Read the primary or official source: Ganguli et al., Red Teaming Language Models (arXiv)