The interjudge agreement for humans

The interjudge agreement for humans was computed using a subsample of 14,410 participants judged by two friends. As the judgments were aggregated (averaged) on collection (i.e., we did not store judgments separately for the judges), a formula was used to compute their intercorrelation (SI Text).

ผลลัพธ์ (ไทย) 1:

ข้อตกลง interjudge สำหรับมนุษย์ถูกคำนวณโดยใช้ subsample 14,410 คนตัดสินเพื่อนสองคน เป็นดุลยพินิจมารวบรวม (เฉลี่ย) บนคอลเลกชัน (เช่น เราไม่ได้เก็บใช้ดุลยพินิจแยกต่างหากสำหรับผู้พิพากษา), ใช้สูตรเพื่อคำนวณ intercorrelation ของพวกเขา (ในข้อความ)

ผลลัพธ์ (ไทย) 2:

ข้อตกลง interjudge สำหรับมนุษย์ได้รับการคำนวณโดยใช้ subsample ของผู้เข้าร่วม 14,410 ตัดสินโดยเพื่อนทั้งสอง ในฐานะที่เป็นคำตัดสินที่ถูกรวม (เฉลี่ย) ในคอลเลกชัน (กล่าวคือเราไม่ได้เก็บคำตัดสินแยกต่างหากสำหรับผู้พิพากษา) ซึ่งเป็นสูตรที่ถูกใช้ในการคำนวณ intercorrelation ของพวกเขา (SI ข้อความ)

ผลลัพธ์ (ไทย) 3:

ข้อตกลง interjudge สำหรับมนุษย์คือคำนวณโดยใช้ subsample ของ 14410 เข้าร่วมตัดสินด้วยเพื่อนอีก 2 คน เป็นคำตัดสินถูกรวม ( เฉลี่ย ) ในคอลเลกชัน ( คือเราไม่ได้จัดเก็บแยกต่างหากสำหรับผู้พิพากษาตัดสิน ) , สูตรที่ใช้ในการคำนวณตาม ( ศรีข้อความ )