Modul SARSA pro Modeler neuronových sítí

Tomáš Mariňák

Master's thesis

Module SARSA for Neuron Net Modeler

Abstract:

Táto práca sa zaoberá rozširením programu NeuronNetModeler o ďalší nový modul, ktorý obsahuje reinforcement learning algoritmus SARSA a deep reinforcement learning algoritmus Deep SARSA network. Ďalším jej cieľom je paralelizácia učenia siete Deep SARSA na základe dátovej paralelizácie. V tejto práci sú popísané spomínané algoritmy a ich proces učenia. Ďalej práca obsahuje dátovú paralelizáciu algoritmu Deep SARSA network, ktorá je spúšťaná na distribuovaných uzloch superpočítača. S využitím týchto implementácií boli vykonané experimenty, ktoré sa zameriavali na ich efektivitu a rýchlosť učenia.

Abstract:

This master thesis describes extension of the program NeuronNetModeler by new module, that consists of reinforcement learning algorithm SARSA and deep reinforcement learning algorithm called Deep SARSA network. Its next goal is parallelization of Deep SARSA learning based on data parallelization. In this thesis are described already mentioned algorithms and their process of learning. Furthermore this thesis contains data parallelization of Deep SARSA network algorithm, that is runned on distributed nodes of supercomputer. Experiments were done with the usage of this implementation, which were focused on their efficiency and speed of learning process.

Keywords

Reinforcement learning, SARSA, Deep SARSA network, Neurónové siete, Dátová paralelizácia

Keywords

Reinforcement learning, SARSA, Deep SARSA network, Neural networks, Data parallelization

Language used: Czech

Date on which the thesis was submitted / produced: 30. 4. 2021

Thesis defence

• Date of defence: 2. 6. 2021
• Supervisor: David Ježek
• Reader: Jakub Štolfa

VSB – Technical University of Ostrava

Fakulta elektrotechniky a informatiky

Master programme / field:
Informační a komunikační technologie / Informatika a výpočetní technika