Accordingly, we extracted 238 expli

Accordingly, we extracted 238 explicitly rejected patches from Eclipse and 673 from Mozilla. From these patches, we randomly selected 300 for manual inspection (Table I). Two of the authors individually inspected these 300 rejected patches and particularly their review comments to identify their rejection reasons. Then, the results were compared and similar reasons were merged to one succinct term (e.g., “the patch fails a test” and “test fail” were merged to “test failures”). After this step,the two evaluators agreed on 4/5 patch-rejection reasons, reaching a Cohen’s Kappa of 0.75 that is considered to be “good agreement” [7]. For the remaining 1/5 disagreed reasons, we invited an external computer science postgraduate to the discussion and finally reached an agreement. In total, we manually identified 12 reasons for patch rejection, which are discussed in Section III-A.

ผลลัพธ์ (ไทย) 1:

ดังนั้น เราสกัดแพทช์ 238 ปฏิเสธอย่างชัดเจนจากคราสและ 673 จาก Mozilla จากแพทช์เหล่านี้ เราสุ่มเลือก 300 สำหรับการตรวจสอบด้วยตนเอง (ตารางฉัน) สองของผู้เขียนแต่ละตรวจสอบซอฟต์แวร์เหล่านี้ถูกปฏิเสธ 300 และโดยเฉพาะอย่างยิ่งการตรวจทานข้อคิดเห็นเพื่อระบุเหตุผลของการปฏิเสธ จากนั้น มีการเปรียบเทียบผลลัพธ์ และเหตุผลคล้ายถูกผสานคำรวบรัดหนึ่ง ("เช่น โปรแกรมปรับปรุงล้มเหลวการทดสอบ" และ "ทดสอบล้มเหลว" ที่ผสาน "ทดสอบความล้มเหลว") หลังจากขั้นตอนนี้ evaluators สองตกลง 4/5 แก้ไขปฏิเสธเหตุผล ถึงกัปปะของโคเฮนของ 0.75 ที่ถือเป็น "ข้อตกลงที่ดี" [7] สาเหตุที่เหลือ 1/5 disagreed เราได้รับเชิญเป็นคอมพิวเตอร์ภายนอกวิทยาศาสตร์บัณฑิตสนทนา และ finally ถึงข้อตกลง รวม เราเอง identified 12 เหตุผลการปฏิเสธของแพทช์ ซึ่งจะอธิบายไว้ในส่วนที่ III-อ.

ผลลัพธ์ (ไทย) 2:

ดังนั้นเราสกัด 238 แพทช์ปฏิเสธอย่างชัดเจนจากคราสและ 673 จาก Mozilla จากแพทช์เหล่านี้เราสุ่มเลือกสำหรับการตรวจสอบ 300 คู่มือ (ตารางที่ I) สองของผู้เขียนเป็นรายบุคคลการตรวจสอบเหล่านี้แพทช์ 300 ปฏิเสธและโดยเฉพาะอย่างยิ่งการทบทวนความเห็นในการระบุเหตุผลที่ปฏิเสธ แล้วผลที่ได้มาเปรียบเทียบและเหตุผลที่คล้ายกันถูกรวมให้เป็นหนึ่งในระยะสั้น (เช่น "แพทช์ล้มเหลวในการทดสอบ" และ "การทดสอบล้มเหลว" รวมเป็น "ความล้มเหลวในการทดสอบ") หลังจากขั้นตอนนี้ทั้งสองตกลงกันในการประเมินผล 4/5 เหตุผลแพทช์ปฏิเสธถึงของโคเฮนคัปปา 0.75 ที่จะถือเป็น "ข้อตกลงที่ดี" [7] สำหรับส่วนที่เหลือ 1/5 ไม่เห็นเหตุผลที่เราเชิญวิทยาการคอมพิวเตอร์ภายนอกสูงกว่าปริญญาตรีที่จะอภิปรายและสาย Nally บรรลุข้อตกลง โดยรวมแล้วเราสายระบุด้วยตนเอง ed 12 เหตุผลในการปฏิเสธแพทช์ซึ่งจะกล่าวถึงในมาตรา III-A

ผลลัพธ์ (ไทย) 3:

ตาม เราสกัด 238 อย่างชัดเจนปฏิเสธและแพทช์จากคราส 673 จาก Mozilla . จากแพทช์เหล่านี้ เราสุ่ม 300 สำหรับคู่มือการตรวจสอบ ( โต๊ะผม ) สองของผู้เขียนจากการตรวจสอบเหล่านี้แพทช์และโดยเฉพาะอย่างยิ่งของพวกเขาตรวจสอบ 300 ปฏิเสธความคิดเห็นเพื่อระบุเหตุผลการปฏิเสธของพวกเขา จากนั้นเปรียบเทียบ และผสานด้วยเหตุผลคล้ายกันเป็นหนึ่งในระยะสั้น ( เช่น " แพทช์ไม่ผ่านการทดสอบ " และ " การทดสอบล้มเหลว " ผสาน " ทดสอบความล้มเหลว " ) หลังจากขั้นตอนนี้ ผู้ประเมิน 2 ท่าน ตกลงบน 4 / 5 แพทช์ปฏิเสธเหตุผลถึง Cohen Kappa 0.75 ที่ถือว่าเป็น " ข้อตกลง " [ 7 ] ที่เหลืออีก 1 / 5 ไม่เห็นด้วยเหตุผลเราเชิญวิทยาศาสตร์คอมพิวเตอร์ภายนอกเพื่อการสนทนาและปริญญาเอกจึงแนลลี่ถึงข้อตกลง โดยรวมเราด้วยตนเอง จึง identi เอ็ด 12 เหตุผลสำหรับแพทช์ปฏิเสธ ซึ่งจะกล่าวถึงในส่วน iii-a.