วิธีการ wsd ที่เสนอที่จะมีการพิจารณาในเรื่องของมนุษย์ อย่างน้อย 30 สาขาวิชาจะคัดเลือกจากนักเรียนนักศึกษาระดับปริญญาโทหลักสูตรปริญญาตรีและ
ซึ่งจะช่วย เรื่องมนุษย์แต่ละคนจะได้รับการร้องขอให้ประเมินผล disambiguation ของตั้งค่าแบบสุ่มที่เลือกของ 20 คำไม่ชัดเจนถูกดึงมาจาก, Tweet ,แตกต่างกัน โพสต์ Tweet ,แต่ละห้องประกอบด้วยคำว่าไม่ชัดเจนที่จะตอบแทน
แสดงพร้อมด้วย 20 , Tweet ,อื่นๆในบริบทที่ผ่านมาและ 20 ในบริบทต่อไปนี้: วัตถุที่จะ
ซึ่งจะช่วยให้การจัดอันดับสำหรับแต่ละระบบ disambiguation ส่งผลให้ในเงื่อนไขของ"ได้อย่างถูกต้องแม่นยำ","เป็นอย่างสูงที่เกี่ยวข้อง","บ้างที่เกี่ยวข้อง",และ
"ไม่มีความสัมพันธ์"นี้จะยอมให้รวม 600 รายจากการประเมินผลของมนุษย์. ความแม่นยำจะคำนวณตามที่
ตามมาตรฐานเปอร์เซ็นต์ของอย่างถูกต้องคำ disambiguated (สรุปของคดีได้อย่างแม่นยำสูงและที่เกี่ยวข้อง) ผลที่จะได้รับเมื่อเทียบกับ
wsd เมื่อไม่นานมานี้กับวิธีการอื่นๆเช่น( Li et al . 2011 )
การแปล กรุณารอสักครู่..
![](//thimg.ilovetranslation.com/pic/loading_3.gif?v=b9814dd30c1d7c59_8619)