Implementace algoritmu ReMASTER do prostředí kyberbezpečnostního simulátoru

Bc. Michal Bureš

Bachelor's thesis

Implementation of the ReMASTER algorithm into the cybersecurity simulation environment

Anotácia:

S rozšiřující se aplikací zpětnovazebních učících algoritmů do průmyslových i akademických odvětví chceme prozkoumat využití i pro kybernetickou bezpečnost. V současné době neexistuje systém plně autonomních útočníků ani obránců v počítačové síti z důvodu nedostatku dostatečně robustních algoritmů a neuronových sítí, a proto zkoumáme jeden z nejmodernějších aplikačních rámců vhodného pro prostředí s definovanou hierarchií akcí. V této práci poskytujeme způsob implementace aplikačního rámce ReMASTER do komplexního systému kyberbezpečnostního simulátoru a limitace spojené s daným přístupem. Docházíme k závěru, že bez značných úprav algoritmus není vhodný pro daný problém.

Abstract:

In connection with ever expanding application of reinforcement learning algorithms in the environment of both industrial and academical branches arises questions of possible use of these algorithms in cybersecurity. In this theses we want to explore its use. System of fully autonomous attackers or defenders in computer network currently does not exist, due to the lack of robust enough algorithms and neural networks, therefore we are researching one of the most modern application frameworks appropriate for environment with defined hierarchy of actions. In this theses we provide a way of implementation of ReMASTER framework into complex system of cybersecurity simulator and limitations of this approach. We come to the conclusion, that without extensive adjustment the algorithm is not fitting for this issue.

Kľúčové slová

zpětnovazební učení, ReMASTER, kyberbezpečnostní simulátoru, umělá inteligence, MTSRNN

Jazyk práce: Czech

Datum vytvoření / odevzdání či podání práce: 16. 12. 2021

Obhajoba závěrečné práce

• Obhajoba proběhla 11. 2. 2022
• Vedúci: RNDr. Martin Drašar, Ph.D.
• Oponent: RNDr. Tomáš Jirsík, Ph.D.

Masaryk University

Faculty of Informatics

Bachelor programme / odbor:
Applied Informatics / Applied Informatics