Automatisk detektering av avvikelser i grafiska användargränssnitt med hjälp av djupinlärning

Abstract

The automatic detection of code errors is a ubiquitous part of the quality assurance process performed during software development. However, graphical errors that may occur in user interfaces are often detected manually. This report examines if deep neural networks (DNNs), may be used to automatically detect two common types of anomalies present in a graphical user interface. The results point towards this being the case for the particular dataset used in this report.Automatisk detektering av kodfel är standard i kvalitetsarbetet som utförs vid mjukvaruveckling. Grafiska fel som kan uppstå i användargränssnitt upptäcks dock ofta manuellt. Den här rapporten undersöker ifall djupa neurala nätverk kan användas för att automatiskt detektera två vanliga fel som uppstår i användargränssnitt. Resultaten indikerar att så är fallet åtminstone för det specifika dataset som används