Měření výkonu proudového zpracování dat s využitím Apache Spark

Bc. Filip Halas

Diplomová práce

Performance Measurement of Stream Data Processing in Apache Spark

Anotace:

Hlavní cíl této práce byla implementace aplikace pro měření výkonu proudového zpracování dat síťových toků nástroje Apache Spark. S využitím implementovaného nástroje bylo provedeno měření v distribuovaném prostředí. Výsledky měření jsou prezentovány v teoretické části práce, společně s popisem způsobu měření a představením relevantních technologií.

Abstract:

The primary goal of this thesis was to implement application for measuring stream processing performance of Apache Spark on network traffic data and to perform performance benchmark in a distributed environment. The results of the benchmark are presented in the theoretical part of this work along with the description of the benchmark and the introduction of relevant technologies.

Keywords

security, stream processing, event processing, performance testing, streaming, network monitoring, NetFlow

Jazyk práce: angličtina

Datum vytvoření / odevzdání či podání práce: 22. 5. 2017

Obhajoba závěrečné práce

• Obhajoba proběhla 21. 6. 2017
• Vedoucí: RNDr. Daniel Tovarňák, Ph.D.
• Oponent: RNDr. Tomáš Jirsík

Masarykova univerzita

Fakulta informatiky

Magisterský studijní program / obor:
Aplikovaná informatika / Služby - výzkum, řízení a inovace