Měření výkonu proudového zpracování dat s využitím Apache Spark

Bc. Filip Halas

Master's thesis

Performance Measurement of Stream Data Processing in Apache Spark

Anotácia:

Hlavní cíl této práce byla implementace aplikace pro měření výkonu proudového zpracování dat síťových toků nástroje Apache Spark. S využitím implementovaného nástroje bylo provedeno měření v distribuovaném prostředí. Výsledky měření jsou prezentovány v teoretické části práce, společně s popisem způsobu měření a představením relevantních technologií.

Abstract:

The primary goal of this thesis was to implement application for measuring stream processing performance of Apache Spark on network traffic data and to perform performance benchmark in a distributed environment. The results of the benchmark are presented in the theoretical part of this work along with the description of the benchmark and the introduction of relevant technologies.

Keywords

security, stream processing, event processing, performance testing, streaming, network monitoring, NetFlow

Jazyk práce: English

Datum vytvoření / odevzdání či podání práce: 22. 5. 2017

Obhajoba závěrečné práce

• Obhajoba proběhla 21. 6. 2017
• Vedúci: RNDr. Daniel Tovarňák, Ph.D.
• Oponent: RNDr. Tomáš Jirsík

Masaryk University

Faculty of Informatics

Master programme / odbor:
Applied Informatics / Service Science, Management and Engineering