Bug reports are vital for any softw

Bug reports are vital for any software development. They allow users to inform developers of the problems encountered while using a software. Bug reports typically contain a detailed description of a failure and occasionally hint at the location of the fault in the code (in form of patches or stack traces). However, bug reports vary in their quality of content; they often provide inadequate or incorrect information. Thus, developers sometimes have to face bugs with descriptions such as “Sem Web” (APACHE bug COCOON-1254), “wqqwqw” (ECLIPSE bug #145133), or just “GUI” with comment “The page is too clumsy” (MOZILLA bug #109242). It is no surprise that developers are slowed down by poorly written bug reports
Permission to make digital or hard copies of all or part of this work for personal or classroom use is granted without fee provided that copies are not made or distributed for profit or commercial advantage and that copies bear this notice and the full citation on the first page. To copy otherwise, to republish,to post on servers or to redistribute to lists,requires prior specific permission and/or a fee.
SIGSOFT 2008/FSE-16, November 9–15, Atlanta, Georgia, USA Copyright 2008 ACM 978-1-59593-995-1 ...$5.00.
because identyfying the problem form such reports takes more time. In this paper, we investigate the quality of bug reports from the perspective of developers. We expected several factors to impact the quality of bug reports such as the length of descriptions, formatting, and presence of stack traces and attachments (such as screenshots). To find out which matter most, we asked 872 developers from the APACHE, ECLIPSE, and MOZILLA projects to: 1. Complete a survey on important information in bug reports and the problems they faced with them. We received a total of 156 responses to our survey (Section 2 and 3). 2. Rate the quality of bug reports from very poor to very good onafive-point Likert scale[22]. We received a total of 1,186 votes for 289 randomly selected bug reports (Section 4). In addition, we asked 1,354 reporters1 from the same projects to complete a similar survey,out of which 310 responded. The results of both surveys suggest that there is a mismatch between what developers consider most helpful and what users provide. To enable swift fixing of bugs, this mismatch should be bridged, for example with tool support for reporters to furnish information that developers want. We developed a prototype tool called CUEZILLA (seeFigure1),which gauges the quality of bug reports and suggests to reporters what should be added to make a bug report better. 1. CUEZILLA measures the quality of bug reports. We trained andevaluated CUEZILLA on the 289 bug reports rated by the developers (Section 5). 2. CUEZILLA provides incentives to reporters. We automatically mined the bug databases for encouraging facts such as “Bug reports with stack traces are fixed sooner” (Section 6).
Throughout this paper reporter refers to the people who create bug reports and are not assigned to any. Mostly reporters are end-users but in many cases they are also experienced developers.
Figure 1: Mockup of CUEZILLA’s user interface. It recommends improvements to the report (left image). To encourage the user to follow the advice,CUEZILLA provides facts that are mined from history (rightimage).
To summarize, this paper makes the following contributions: 1. a survey on how bug reports are used among 2,226 developers and reporters, out of which 466 responded; 2. empirical evidence for a mismatch between what developers expect and what reporters provide; 3. the CUEZILLA tool that measures the quality of bug reports and suggests how reporters could enhance their reports, so that their problems get fixed sooner. We conclude this paper with threats to validity (Section 7), related work (Section 8), and future research directions (Section 9).

ผลลัพธ์ (ไทย) 1:

รายงานข้อผิดพลาดสำคัญสำหรับการพัฒนาซอฟต์แวร์ใด ๆ พวกเขาอนุญาตให้แจ้งปัญหาที่พบในขณะใช้ซอฟต์แวร์ของผู้ใช้ รายงานข้อผิดพลาดโดยทั่วไปประกอบด้วยคำอธิบายโดยละเอียดของความล้มเหลว และบางครั้งเดาตำแหน่งของความผิดพลาดในรหัส (ในรูปของซอฟต์แวร์หรือสแตก) อย่างไรก็ตาม รายงานข้อบกพร่องแตกต่างกันในคุณภาพของเนื้อหา พวกเขามักจะให้ข้อมูลไม่เพียงพอ หรือไม่ถูกต้อง ดังนั้น นักพัฒนาบางครั้งต้องเผชิญกับโรคจิตกับคำอธิบายเช่น "Sem เว็บ" (APACHE บักคูน-1254), "wqqwqw" (ECLIPSE bug #145133), หรือเพียงแค่ "GUI" พร้อมแสดงความคิดเห็น "หน้าคือซุ่มซ่ามเกินไป" (MOZILLA bug #109242) จึงไม่แปลกใจที่นักพัฒนาจะชะลอตัวลง โดยประกาศเขียนไม่ดีการทำดิจิตอล หรือคัดลอกฮาร์ดดิสก์ทั้งหมด หรือเป็นส่วนหนึ่งของงานนี้สำหรับการใช้งานส่วนตัวหรือห้องเรียนได้รับ โดยไม่มีค่าธรรมเนียมที่สำเนาไม่ได้ทำ หรือกระจายกำไรหรือประโยชน์เชิงพาณิชย์ และที่สำเนาประกาศนี้และอ้างอิงเต็มบนหน้าแรก การคัดลอกมิฉะนั้น การประกาศ การลงรายการบัญชีบนเซิร์ฟเวอร์ หรือ การกระจายรายการ ต้องใช้สิทธิ์ล่วงหน้า specific และ/หรือค่าธรรมเนียม SIGSOFT 2008 FSE-16, 9 พฤศจิกายน – 15 แอตแลนตา จอร์เจีย สหรัฐอเมริกาลิขสิทธิ์ 2008 ACM 978-1-59593-995-1... $5.00เพราะ identyfying ปัญหาแบบรายงานดังกล่าว ต้องใช้เวลามากขึ้น ในกระดาษนี้ เราตรวจสอบคุณภาพของรายงานข้อผิดพลาดจากมุมมองของนักพัฒนา เราคาดว่าปัจจัยต่าง ๆ ที่ส่งผลกระทบต่อคุณภาพของรายงานข้อผิดพลาดเช่นความยาวของคำอธิบาย รูปแบบ และสถานะการออนไลน์ของสแตกและสิ่งที่แนบ (เช่นหน้าจอ) ออกเรื่องใดมากที่สุด เราถาม 872 นักพัฒนาจากโครงการ APACHE, ECLIPSE และ MOZILLA เพื่อ: 1. กรอกแบบสำรวจข้อมูลสำคัญในรายงานข้อผิดพลาดและปัญหาที่พวกเขาเผชิญหน้ากับพวกเขา เรารับทั้งหมด 156 คำตอบแบบสำรวจของเรา (ส่วนที่ 2 และ 3) 2. ประเมินคุณภาพของรายงานจุดบกพร่องจากแย่มากขนาด Likert onafive จุดดีมาก [22] เรารับทั้งหมด 1,186 คะแนนสำหรับรายงานข้อผิดพลาดแบบสุ่ม 289 (4 ส่วน) นอกจากนี้ เราถาม 1,354 reporters1 จากโครงการเดียวกันเพื่อทำการสำรวจที่คล้ายกัน จากที่ 310 ตอบ ผลการสำรวจทั้งสองแนะนำว่า มีตรงกันระหว่างนักพัฒนาอะไรพิจารณาประโยชน์มากที่สุด และสิ่งที่ผู้ใช้ให้ การเปิดใช้งาน fixing อย่างรวดเร็วของข้อบกพร่อง ไม่ตรงกันนี้ควรจะระหว่างกาล เช่น ด้วยการสนับสนุนเครื่องมือสำหรับผู้สื่อข่าวในการจัดเตรียมข้อมูลที่นักพัฒนาต้อง เราพัฒนาเครื่องมือต้นแบบที่เรียกว่า CUEZILLA (seeFigure1), ซึ่ง gauges คุณภาพของรายงานข้อบกพร่อง และแนะนำให้ผู้สื่อข่าวอะไรควรจะเพิ่มให้รายงานข้อผิดพลาดดีกว่า 1. CUEZILLA วัดคุณภาพของรายงานข้อผิดพลาด เราฝึก andevaluated CUEZILLA บนรายงาน 289 bug คะแนน โดยนักพัฒนา (ส่วนที่ 5) 2. CUEZILLA ให้แรงจูงใจให้ผู้สื่อข่าว เราขุดโดยอัตโนมัติฐานข้อมูลข้อผิดพลาดสำหรับกระตุ้นให้ข้อเท็จจริงเช่น"รายงานข้อผิดพลาดกับสแตก fixed เร็ว" (มาตรา 6)ทั้งนี้กระดาษ ข่าวหมายถึงผู้ที่สร้างรายงานข้อผิดพลาด และไม่มีกำหนดใด ๆ ผู้สื่อข่าวส่วนใหญ่เป็นผู้ใช้ แต่ในหลายกรณี พวกเขายังมีนักพัฒนาที่มีประสบการณ์รูปที่ 1: Mockup ของส่วนติดต่อผู้ใช้ของ CUEZILLA แนะนำการปรับปรุงรายงาน (ภาพซ้าย) เพื่อส่งเสริมให้ผู้ใช้สามารถทำตามคำแนะนำ CUEZILLA ให้ข้อเท็จจริงที่ขุดจากประวัติ (rightimage)เพื่อสรุป กระดาษนี้ให้เป็นต่อไปนี้: 1. แบบสำรวจวิธีใช้รายงานข้อผิดพลาดในหมู่นักพัฒนาและนักข่าว จากที่ 466 ตอบ 2,226 2. เชิงประจักษ์หลักฐานไม่ตรงกันระหว่างนักพัฒนาคาดหวังและสิ่งที่ผู้สื่อข่าวให้ 3. เครื่องมือ CUEZILLA ที่วัดคุณภาพของข้อผิดพลาดรายงาน และแนะนำวิธีผู้สื่อข่าวสามารถเพิ่มรายงานของพวกเขา เพื่อให้ปัญหาของพวกเขาได้ fixed เร็ว เราสรุปกระดาษนี้ มีภัยคุกคามต่อความถูกต้อง (มาตรา 7), ทำงานที่เกี่ยวข้อง (มาตรา 8), และทิศทางการวิจัยในอนาคต (9 ส่วน)

ผลลัพธ์ (ไทย) 2:

รายงานข้อผิดพลาดที่มีความสำคัญสำหรับการพัฒนาซอฟต์แวร์ใด ๆ พวกเขาช่วยให้ผู้ใช้ที่จะแจ้งให้นักพัฒนาของปัญหาที่พบในขณะที่ใช้ซอฟแวร์ รายงานข้อผิดพลาดมักจะมีคำอธิบายรายละเอียดของความล้มเหลวและบางครั้งแบะท่าสถานที่ตั้งของความผิดในรหัส (ในรูปแบบของแพทช์หรือสแต็คร่องรอย) อย่างไรก็ตามรายงานข้อผิดพลาดความแตกต่างในคุณภาพของเนื้อหา; พวกเขามักจะให้ข้อมูลไม่เพียงพอหรือไม่ถูกต้อง ดังนั้นนักพัฒนาบางครั้งต้องเผชิญกับข้อบกพร่องที่มีรายละเอียดเช่น "เสเว็บ" (APACHE ข้อผิดพลาดรัง 1254), "wqqwqw" (คราสข้อผิดพลาด # 145133) หรือเพียงแค่ "GUI" กับความคิดเห็นหน้า "เป็นเงอะงะเกินไป" (มอซิลลา ข้อผิดพลาด # 109242) มันไม่ใช่เรื่องแปลกที่นักพัฒนาจะชะลอตัวลงโดยเขียนไม่ดีรายงานข้อผิดพลาดไม่
ได้รับอนุญาตให้ทำสำเนาดิจิตอลหรือหนักของทั้งหมดหรือบางส่วนของงานนี้สำหรับการใช้งานส่วนบุคคลหรือในชั้นเรียนจะได้รับโดยไม่เสียค่าธรรมเนียมให้สำเนาไม่ได้ทำหรือแจกโปร T Fi หรือประโยชน์ในเชิงพาณิชย์ และสำเนาแบกแจ้งให้ทราบล่วงหน้านี้และการอ้างอิงเต็มรูปแบบบนหน้าแรก Fi จะ ในการคัดลอกอย่างอื่นในการเผยแพร่การโพสต์บนเซิร์ฟเวอร์หรือเพื่อแจกจ่ายไปยังรายการที่ต้องการก่อน speci Fi C ได้รับอนุญาตและ / หรือค่าธรรมเนียม.
SIGSOFT 2008 / FSE-16, 09-15 พฤศจิกายน, แอตแลนตา, จอร์เจีย, สหรัฐอเมริกาลิขสิทธิ์ 2008 ACM 978-1 -59593-995-1 ... $ 5.00.
เวลาเพราะ identyfying แบบฟอร์มการรายงานปัญหาดังกล่าวใช้เวลามากขึ้น ในบทความนี้เราจะตรวจสอบคุณภาพของการรายงานข้อผิดพลาดจากมุมมองของนักพัฒนา เราคาดว่าปัจจัยหลายประการที่ส่งผลกระทบต่อคุณภาพของการรายงานข้อผิดพลาดดังกล่าวเป็นความยาวของรายละเอียดการจัดรูปแบบและการปรากฏตัวของกอง traces และสิ่งที่แนบ (เช่นภาพหน้าจอ) ไปยัง FI nd ออกที่สำคัญที่สุดที่เราถาม 872 นักพัฒนาจากโครงการ APACHE คราสและ Mozilla 1. เสร็จสิ้นการสำรวจข้อมูลที่สำคัญในการรายงานข้อผิดพลาดและปัญหาที่พวกเขาต้องเผชิญกับพวกเขา เราได้รับทั้งหมด 156 คำตอบการสำรวจของเรา (มาตรา 2 และ 3) Likert ขนาด 2. อัตราค่าคุณภาพของการรายงานข้อผิดพลาดจากที่น่าสงสารมาก Fi Ona จะดีมากได้จุด [22] เราได้รับรวม 1,186 คะแนนสำหรับ 289 รายงานข้อผิดพลาดการสุ่มเลือก (มาตรา 4) นอกจากนี้เราขอ 1,354 reporters1 จากโครงการเดียวกันเพื่อความสมบูรณ์ของการสำรวจที่คล้ายกันออกจากที่ 310 ตอบ ผลที่ได้จากทั้งการสำรวจชี้ให้เห็นว่ามีความไม่ตรงกันระหว่างพิจารณาสิ่งที่นักพัฒนาที่เป็นประโยชน์มากที่สุดและสิ่งที่ผู้ใช้ให้ ต้องการเปิดใช้งาน Xing Fi รวดเร็วของข้อบกพร่องที่ไม่ตรงกันนี้ควรจะ bridged เช่นด้วยการสนับสนุนเครื่องมือสำหรับผู้สื่อข่าวเพื่อให้ข้อมูลที่นักพัฒนาต้องการ เราได้พัฒนาเครื่องมือต้นแบบที่เรียกว่า CUEZILLA (seeFigure1) ซึ่งมาตรวัดคุณภาพของการรายงานข้อผิดพลาดและแสดงให้เห็นกับผู้สื่อข่าวสิ่งที่ควรจะเพิ่มเพื่อให้รายงานข้อผิดพลาดที่ดีขึ้น 1. CUEZILLA มาตรการที่มีคุณภาพของรายงานข้อผิดพลาด เราได้รับการฝึกฝน CUEZILLA andevaluated ในการรายงานข้อผิดพลาด 289 จัดอันดับโดยนักพัฒนา (มาตรา 5) 2. CUEZILLA ให้แรงจูงใจกับผู้สื่อข่าว เราขุดฐานข้อมูลข้อผิดพลาดในการส่งเสริมให้ข้อเท็จจริงเช่น "รายงานข้อผิดพลาดมีร่องรอยสแต็คจะคง Fi เร็ว" (มาตรา 6). โดยอัตโนมัติ
ตลอดนักข่าวกระดาษนี้หมายถึงคนที่สร้างรายงานข้อผิดพลาดและไม่ได้รับมอบหมายให้ใด ๆ ส่วนใหญ่เป็นผู้สื่อข่าวที่มีผู้ใช้สิ้น แต่ในหลายกรณีพวกเขายังมีนักพัฒนาที่มีประสบการณ์.
รูปที่ 1: Mockup ของอินเตอร์เฟซผู้ใช้ CUEZILLA ของ มันแนะนำการปรับปรุงรายงาน (ภาพซ้าย) เดอะ เพื่อส่งเสริมให้ผู้ใช้สามารถทำตามคำแนะนำที่ CUEZILLA ให้ข้อเท็จจริงที่ขุดจากประวัติศาสตร์ (rightimage).
เพื่อสรุปกระดาษนี้จะทำให้ผลงานต่อไปนี้ 1. การสำรวจเกี่ยวกับวิธีการรายงานข้อผิดพลาดจะถูกใช้ในหมู่นักพัฒนาและ 2,226 ผู้สื่อข่าวออกจากที่ 466 ตอบ; 2. หลักฐานเชิงประจักษ์สำหรับตรงกันระหว่างสิ่งที่นักพัฒนาคาดหวังและสิ่งที่นักข่าวให้; 3. เครื่องมือ CUEZILLA ที่มาตรการที่มีคุณภาพของรายงานข้อผิดพลาดและแสดงให้เห็นว่าสามารถเพิ่มประสิทธิภาพผู้สื่อข่าวรายงานของพวกเขาเพื่อให้ปัญหาของพวกเขาได้รับคงที่ไม่ช้าก็เร็ว เราสรุปกระดาษนี้กับภัยคุกคามต่อความถูกต้อง (มาตรา 7) ที่เกี่ยวข้องกับงาน (มาตรา 8) และทิศทางการวิจัยในอนาคต (มาตรา 9)

ผลลัพธ์ (ไทย) 3:

รายงานข้อผิดพลาดมีความสำคัญสำหรับการพัฒนาซอฟต์แวร์ใด ๆ พวกเขาอนุญาตให้ผู้ใช้เพื่อแจ้งให้นักพัฒนาของปัญหาในขณะที่ใช้ซอฟต์แวร์ รายงานข้อผิดพลาดทั่วไปประกอบด้วยรายละเอียดของความล้มเหลว และมีคำใบ้ที่สถานที่ของข้อบกพร่องในรหัส ( ในรูปแบบของแพทช์หรือสแต็คร่องรอย ) อย่างไรก็ตาม รายงานข้อผิดพลาดที่แตกต่างกันในคุณภาพของพวกเขาที่เนื้อหา พวกเขามักจะให้ข้อมูลไม่เพียงพอ หรือ ไม่ถูกต้อง ดังนั้นนักพัฒนาบางครั้งต้องเผชิญข้อบกพร่องที่มีคำอธิบายเช่น " จากเว็บ ( Apache แมลง cocoon-1254 ) " wqqwqw " ( เกิดข้อผิดพลาด # 145133 ) หรือเพียงแค่ " GUI " แสดงความคิดเห็น " หน้ามันซุ่มซ่าม " ( Mozilla บั๊ก # 109242 ) ไม่แปลกใจที่นักพัฒนาจะชะลอตัวลงโดยการไม่เขียนรายงานข้อผิดพลาดอนุญาตให้สำเนาดิจิตอลหรือฮาร์ดดิสก์ทั้งหมดหรือบางส่วนของงานนี้สำหรับใช้ส่วนบุคคลหรือในชั้นเรียนจะได้รับโดยไม่เสียค่าธรรมเนียมให้สำเนาไม่ทำหรือจำหน่ายสำหรับ Pro จึง T หรือพาณิชย์ประโยชน์และชุดหมีนี้สังเกตและการอ้างอิงแบบเต็มบนจึงตัดสินใจเดินทางไปหน้า การคัดลอกหรือการประกาศจะประกาศในเซิร์ฟเวอร์หรือเพื่อแจกจ่ายไปยังรายการที่ต้องการก่อนจึงอนุญาตประเภท C และ / หรือค่าธรรมเนียมsigsoft 2008 / fse-16 , พฤศจิกายน 9 – 15 , แอตแลนตา , จอร์เจีย , สหรัฐอเมริกาลิขสิทธิ์ 2551 พลอากาศเอก 978-1-59593-995-1 . . . $ 5.00เพราะ identyfying ปัญหาแบบฟอร์มรายงานดังกล่าวต้องใช้เวลามากขึ้น ในบทความนี้เราจะตรวจสอบคุณภาพของการรายงานข้อผิดพลาดจากมุมมองของนักพัฒนา เราคาดว่าหลายปัจจัยที่ส่งผลกระทบต่อคุณภาพของการรายงานข้อผิดพลาดเช่นความยาวของคำอธิบายการจัดรูปแบบและการปรากฏตัวของร่องรอยของสแต็คและสิ่งที่แนบมา ( เช่นภาพหน้าจอ ) ที่จะถ่ายทอดออกมา ซึ่งสำคัญที่สุด และ เราได้ถามคุณนักพัฒนาจาก Apache , Eclipse , และ Mozilla โครงการ : 1 . สมบูรณ์การสำรวจข้อมูลที่สำคัญในการรายงานข้อผิดพลาดและปัญหาที่พวกเขาเผชิญกับพวกเขา เราได้รับทั้งหมด 156 การตอบสนองต่อการสำรวจของเรา ( ส่วนที่ 2 และ 3 ) 2 . คะแนนคุณภาพของการรายงานข้อผิดพลาดจากที่ยากจนมาก ถึงดีมาก ONA มาตรวัดแบบไลเคิร์ต จึงได้จุด [ 22 ] เราได้รับทั้งหมด 1186 โหวต 289 สุ่มรายงานบั๊ก ( มาตรา 4 ) นอกจากนี้ เราถามมัน reporters1 จากโครงการเดียวกัน เพื่อให้สำรวจคล้ายคลึงกัน จากที่ผมตอบ ผลของการสำรวจว่ามีอะไรที่ไม่ตรงกันระหว่างนักพัฒนาพิจารณาประโยชน์มากที่สุดและสิ่งที่ผู้ใช้ให้ เพื่อให้รวดเร็ว จึงซิ่งบักไม่ตรงกันนี้ควร bridged ตัวอย่างด้วยเครื่องมือสนับสนุนสำหรับนักข่าว เพื่อให้ข้อมูลที่นักพัฒนาต้องการ เราพัฒนาเครื่องมือต้นแบบ เรียกว่า cuezilla ( seefigure1 ) ซึ่งวัดคุณภาพของการรายงานข้อผิดพลาดและแสดงให้เห็นถึงนักข่าวว่า ควรเพิ่มให้รายงานข้อผิดพลาดที่ดี 1 . cuezilla มาตรการคุณภาพของรายงานบั๊ก เราฝึกได้ cuezilla ใน 289 รายงานข้อผิดพลาด / นักพัฒนา ( มาตรา 5 ) 2 . cuezilla ให้สิ่งจูงใจกับนักข่าว เราขุดข้อผิดพลาดโดยอัตโนมัติฐานข้อมูลเพื่อส่งเสริมข้อเท็จจริง เช่น " รายงานข้อผิดพลาดกับร่องรอยกองอยู่จึง xed เร็ว " ( มาตรา 6 )ทั้งนักข่าว หมายถึง คนที่สร้างรายงานข้อผิดพลาดและไม่ได้มอบหมายใด ๆ นักข่าวส่วนใหญ่เป็นผู้ใช้ แต่ในหลายกรณี พวกเขายังมีประสบการณ์นักพัฒนารูปที่ 1 : mockup ของอินเตอร์เฟซผู้ใช้ cuezilla . ควรปรับปรุงรายงาน ( จากภาพ ) เพื่อสนับสนุนให้ผู้ใช้ที่จะปฏิบัติตามคำแนะนำ cuezilla ให้ข้อเท็จจริงที่ mined จากประวัติศาสตร์ ( rightimage )สรุป กระดาษนี้จะทำให้ผลงานต่อไปนี้ : 1 . การสำรวจวิธีการรายงานข้อผิดพลาดที่ใช้ใน 2226 นักพัฒนาและนักข่าวจากที่ผมตอบ 2 . หลักฐานเชิงประจักษ์ที่ไม่ตรงกันระหว่างสิ่งที่คาดหวังและสิ่งที่นักข่าวให้นักพัฒนา 3 . การ cuezilla เครื่องมือวัดคุณภาพของการรายงานข้อผิดพลาดและแสดงให้เห็นว่านักข่าวสามารถเพิ่มรายงาน เพื่อให้ปัญหาของพวกเขาได้รับการถ่ายทอด xed เร็วกว่านี้ เราสรุปบทความนี้ด้วยการคุกคามเพื่อความถูกต้อง ( มาตรา 7 ) , งานที่เกี่ยวข้อง ( มาตรา 8 ) , และทิศทางการวิจัยในอนาคต ( มาตรา 9 )