Bc. Klára Petrovičová

Bachelor's thesis

Automatic Recognition of User Interface States Using Convolutional Neural Networks

Automatic Recognition of User Interface States Using Convolutional Neural Networks
Abstract:
Systém Robotic Quality Assurance firmy Y Soft využívá automatické testování uživatelského rozhraní za použití robotické paže a kamery. Tato bakalářská práce se zabývá částí tohoto řešení, efektivním rozpoznáváním regionů na obrazovce. Standardní metody pro rozpoznávání fotek nejsou dostatečně efektivní, proto práce využívá konvoluční neuronové sítě. Finální řešení navíc zahrnuje techniky pro augmentaci …more
Abstract:
The Y Soft's Robotic Quality Assurance system exploits automated testing of printer user interfaces using a robotic arm and a camera. This thesis explores part of this solution, effective recognition of regions on the monitor screens. Standard image processing methods are not sufficient; therefore, the solution employs Convolutional Neural Networks. The scope of this thesis also includes data augmentation …more
 

Keywords

automated testing Y Soft RQA C# ML.NET image classification Convolutional Neural Networks MobileNet transfer learning data augmentation
 
Language used: English
Date on which the thesis was submitted / produced: 25. 5. 2021
Identifier: https://is.muni.cz/th/lqdwq/

Thesis defence

  • Date of defence: 28. 6. 2021
  • Supervisor: RNDr. Jaroslav Čechák
  • Reader: doc. RNDr. Tomáš Brázdil, Ph.D.

Citation record

Cite this text

Full text of thesis

Contents of on-line thesis archive
Published in Theses:
  • světu
Other ways of accessing the text
Institution archiving the thesis and making it accessible: Masarykova univerzita, Fakulta informatiky
Složka Reference to the local database directory of the institution