E. Effects of individual attributes
We examined each of the features individually to understand the decision characteristics of attributes and the strength of relationship with usefulness. Due to space restriction we report some interesting observation, but omit detail correlation outcomes.
If a comment triggered changes within one line distance to comment-highlighted lines, it was highly likely to be useful (precision: 88% and recall: 78%). If the author did not participate in a comment-thread, it was more likely to be useful (88%) than those threads where the author did (49%). A manual investigation of comments showed that absence of the author in a comment-thread very often indicated an implicit acknowledgment by the author and a useful comment. On the other hand, author participation indicated either a useful comment with explicit acknowledgment (e.g., ‘done’, ‘fixed’, and ‘nice catch’) from the author or a not useful question / false positive, which the author responded to.
Comment-threads with only one comment or participant were more likely to be useful (88%), than those with more than one comment or participant (51%). The explanation is similar as the explanation for author participation, as participation of several engineers indicated a discussion which might or might not be useful. No discussion often indicated implicit agreement. Our keyword based classification also showed promising results. Table I shows keywords, which belonged to at least 15 comments in our oracle and are at least twice more likely to be in a particular class of comments (i.e. either useful or not useful) than the other. We found that comments with command verbs (assert, expand, fix, remove, and move) or request (e.g., please, should, may be) are more likely to be useful. On the other hand, questions (e.g., why, which, and how), acknowledgment (e.g., yes, already) or denial (doesn’t, and not) are more likely to be in not useful comments.
Most of the comments (83%) are made during the first two iterations. Comments made after the first two iterations are less likely to be useful. Also, comments where a change within one line of the comment highlighted text could be detected where much more likely to be useful. Most of the comments (92%) with Won’t fix status are Not Useful, while most of the comments with Resolved/ Closed status are (≈ 80%) Useful.
Finally, although majority (51%) of the comments had ‘Extremely Negative’ tones, only 57% of those comments were useful. On the other hand, comments with ‘Neutral’ or ‘Somewhat Negative’ tones were more likely to be ‘Useful’ (≈ 79% were considered useful).
E . ผลของแต่ละคุณลักษณะ
เราทดสอบแต่ละคุณลักษณะเฉพาะตัวที่จะเข้าใจการตัดสินใจลักษณะของแอตทริบิวต์ และความแข็งแรงของความสัมพันธ์กับประโยชน์ . เนื่องจากพื้นที่จำกัดเรารายงานข้อสังเกตบางประการที่น่าสนใจ แต่รายละเอียดความสัมพันธ์ละเว้นผล
ถ้าความคิดเห็นทริกเกอร์การเปลี่ยนแปลงภายในบรรทัดเดียว ระยะทางที่จะแสดงความคิดเห็นเน้นเส้นมันมีโอกาสสูงที่จะเป็นประโยชน์ ( ความแม่นยำ 88% และเรียกคืน 78 % ) ถ้าผู้เขียนไม่ได้มีส่วนร่วมในความคิดเห็นด้าย มันน่าจะเป็นประโยชน์ ( 88% ) กว่ากระทู้ที่ผู้เขียนได้ ( 49% ) การตรวจสอบคู่มือของความคิดเห็น พบว่า ขาดผู้เขียนในความคิดเห็นด้ายมากมักจะพบยอมรับโดยปริยาย โดยผู้เขียน และแสดงความคิดเห็นที่เป็นประโยชน์บนมืออื่น ๆ , การมีส่วนร่วมของผู้เขียนแสดงให้เห็นประโยชน์กับการยอมรับชัดเจน ( เช่น ' ทำ ' ' จึง xed ' และ ' เจ๋งมาก ' ) จากผู้เขียนหรือใช้ ประโยชน์คำถาม / เท็จบวก ซึ่งเป็นผู้เขียนตอบ
คอมเม้นกระทู้ ที่มีเพียงหนึ่งความคิดเห็นหรือผู้เข้าร่วมมีโอกาสเป็นประโยชน์ ( 88% ) มากกว่าผู้ที่มีมากกว่าหนึ่งความคิดเห็นหรือมีส่วนร่วม ( 51% )คำอธิบายลักษณะเป็นคำอธิบายสำหรับการมีส่วนร่วมการมีส่วนร่วมของผู้เขียน ในฐานะวิศวกร พบการสนทนาที่อาจจะหรืออาจจะไม่เป็นประโยชน์ ไม่มีการสนทนามักจะพบข้อตกลงโดยปริยาย . คำหลักของเราที่ใช้ใน classi จึงยังแสดงผลลัพธ์ที่มีแนวโน้ม ตารางแสดงคำหลักที่ฉัน ,ซึ่งเป็นของอย่างน้อย 15 ความเห็นใน Oracle ของเราและอย่างน้อยสองครั้งมีแนวโน้มที่จะอยู่ในระดับใด ๆ ( เช่นใด มีประโยชน์หรือไม่มีประโยชน์ ) กว่าคนอื่น ๆ เราพบว่ามีความคิดเห็นกับคำกริยาคำสั่ง ( ยืนยัน ขยาย จึง x , ลบและย้าย ) หรือการร้องขอ ( เช่น , กรุณา , ควร , อาจ ) มีแนวโน้มที่จะเป็นประโยชน์ บนมืออื่น ๆ , คำถาม เช่น ทำไมที่และวิธีการ )การยอมรับ ( เช่น ใช่ อยู่แล้ว ) หรือปฏิเสธ ( ไม่ใช่และไม่ใช่ ) มีแนวโน้มจะไม่ได้ประโยชน์แสดงความคิดเห็น
ส่วนใหญ่ของความคิดเห็น ( 83% ) ที่ทำระหว่างจึงตัดสินใจเดินทางไปสองรอบ . ความคิดเห็นที่ทำหลังจากจึงตัดสินใจเดินทางไปสองรอบมีโอกาสน้อยที่จะเป็นประโยชน์ นอกจากนี้ ความเห็นที่เปลี่ยนแปลงในหนึ่งบรรทัดของข้อความที่เลือก แสดงความคิดเห็น สามารถตรวจพบได้ว่าเท่าไหร่ น่าจะมีประโยชน์มากกว่าที่สุดของความคิดเห็น ( 92% ) กับไม่จึง x สถานะไม่ได้ประโยชน์ ในขณะที่ส่วนใหญ่ของความคิดเห็นการแก้ไข / ปิดสถานะ ( ≈ 80% ) มีประโยชน์
ในที่สุด แม้ว่าส่วนใหญ่ ( 51 เปอร์เซ็นต์ ) ของความคิดเห็นเชิงลบมากได้ ' ' เสียงเพียง 57% ของความคิดเห็นที่เป็นประโยชน์ บนมืออื่น ๆความคิดเห็น ' เป็นกลาง ' หรือ ' เชิงลบ ' โทนค่อนข้างมีแนวโน้มที่จะ ' ประโยชน์ ' ( ≈ 79 % ถือว่ามีประโยชน์ )
การแปล กรุณารอสักครู่..