Reproducing field failures based on semi-formal failure scenario descriptions

Yazılım sistemlerinin artan hacmi ve karmaşıklığı nedeniyle bu sistemleri her ayrıntısına kadar test etmek zorlaşmaktadır. Sonuç olarak, bazı hatalar tespit edilemeden kalabilir. Tespit edilmemiş hatalar canlı sistemlerde güvenilirliğe tehdit oluşturabilir. Bu hatalar genellikle sahadan yazılım geliştiricilere raporlanır. Raporlamalar her zaman tam, açık ve biçimsel olmadığı için hatalı kullanım senaryolarını analiz edip yeniden üretmek hatrı sayılır bir zaman ve emek gerektirir. Bu çalışmada, hata ayıklamaya yardımcı olmak amacıyla sahadan bildirilen hatalı senaryoları otomatik olarak yeniden meydana getirmek için özgün bir yaklaşım sunulmaktadır. Yaklaşımımız, anahtar kelime kümesi içeren yarı-yapısal hata senaryolarına dayanmaktadır. Bu açıklamalar otomatik olarak çözümlenerek, geçerli girdi kümeleriyle önceden tanımlanmış test senaryosu şablonlarına eşlenir. Sonrasında, raporlanan hata senaryolarını yeniden üretmek için test senaryoları üretilir ve işletilir. Bu yaklaşım telekomünikasyon sektöründen bir şirkette yapılan bir sanayi vaka çalışması ile değerlendirildi. Sahadan raporlanan birçok hatalı senaryo başarıyla yeniden üretildi. Yaklaşım aynı zamanda şirketin kalite güvence sürecinde benimsenmiştir. Tekrar kullanılabilir test senaryosu şablonlarının bir kerelik hazırlanmasının ve test mühendislerinin eğitimlerinin ardından, raporlanan hataların %40'ı manüel çaba gerektirmeksizin yeniden üretilmiştir.