| Title: | Open-source Defect Injection Benchmark Testbed for the Evaluation of Testing |
| Other Titles: | Volně použitelný testovací přípravek s injekcí defektů pro vyhodnocování testování |
| Authors: | Bureš, Miroslav Herout, Pavel bestoun, s. ahmed |
| Citation: | BUREŠ, M. HEROUT, P. BESTOUN, sa. Open-source Defect Injection Benchmark Testbed for the Evaluation of Testing. In Proceedings of the 13th IEEE International Conference on Software Testing, Validation and Verification, ICST 2020. Piscataway: IEEE, 2020. s. 442-447. ISBN: 978-1-72815-777-1 , ISSN: 2381-2834 |
| Issue Date: | 2020 |
| Publisher: | IEEE |
| Document type: | konferenční příspěvek ConferenceObject |
| URI: | 2-s2.0-85091068012 http://hdl.handle.net/11025/47176 |
| ISBN: | 978-1-72815-777-1 |
| ISSN: | 2381-2834 |
| Keywords: | testování software;injekce poruch;mutační testování;benchmarking |
| Keywords in different language: | Software Testing;Fault injection;mutation testing;benchmarking |
| Abstract: | Běžně používaná metoda pro vyhodnocení efektivity testovací techniky je měřit poměr nalezených defektů při použití hodnocených testovacích případů. Do zdrojového kódu testovaného software mohou být injektovány reálné či uměle vytvořené defekty. Pro sofistikovanější vyhodnocování se používá mutační testování, které uměle mění zdrojový kód. Mutační testování nedokáže nasimulovat rozsáhlejší a realistické defekty, vzniklé například špatným pochopením specifikace. Ve článku je představena open-source aplikace sloužící jako testovací přípravek umožňující injekci sofistikovaných defektů. Defekty se nacházejí v předem připravených blocích a výsledná aplikace je z těchto bloků sestavena. Naprostá většina funkcionality a elementů GUI je pokryta automatickými frond-end testy. |
| Abstract in different language: | A natural method to evaluate the effectiveness of a testing technique is to measure the defect detection rate when applying the created test cases. Here, real or artificial software defects can be injected into the source code of software. For a more extensive evaluation, injection of artificial defects is usually needed and can be performed via mutation testing using code mutation operators. However, to simulate complex defects arising from a misunderstanding of design specifications, mutation testing might reach its limit in some cases. In this paper, we present an open-source benchmark testbed application that employs a complement method of artificial defect injection. The application is compiled after artificial defects are injected into its source code from predefined building blocks. The majority of the functions and user interface elements are covered by creating front-end-based automated test cases that can be used in experiments. |
| Rights: | © IEEE |
| Appears in Collections: | Konferenční příspěvky / Conference Papers (KIV) OBD |
Files in This Item:
| File | Size | Format | |
|---|---|---|---|
| Herout-ICST-2020.pdf | 329,64 kB | Adobe PDF | View/Open |
Please use this identifier to cite or link to this item:
http://hdl.handle.net/11025/47176Items in DSpace are protected by copyright, with all rights reserved, unless otherwise indicated.