Zpracování velkých datových souborů

Patrik Drbohlav

Bachelor's thesis

The Big Data Processing

Abstract:

Tato bakalářská práce se zaměřuje na efektivní zpracování rozsáhlých datových souborů. Zabývá se obtížemi, spojenými s manipulací rozsáhlých dat a potřebou rychlé a efektivní analýzy. Cílem je prozkoumat současný stav zpracování dat v daném prostředí a navrhnout chytré softwarové řešení filtrovacího systému. Teoretická část práce zkoumá problematiku zpracování velkých datových souborů v organizaci a získání podkladů pro tvorbu praktické části této práce. Praktická část řeší potíže s různými formáty datasetů, poukazuje na potřebu snadno použitelného nástroje pro částečnou automatizaci procesu vyhodnocování dat. Na základě teoretických a praktických poznatků byl navržen filtrovací systém v programu MATLAB. Toto řešení nejen eliminuje manuální práci, ale podporuje matematické operace a vytváří vizualizace výsledků testů. Výsledný nástroj je uživatelsky přívětivý a výrazně zvyšuje efektivitu zpracování rozsáhlých datových souborů. Navrhované řešení přináší technologický pokrok a měřitelné výhody pro rychlejší a přesnější analýzu dat.

Abstract:

This bachelor's thesis focuses on the efficient processing of extensive data files, addressing challenges associated with handling large datasets and the need for quick and effective analysis. The goal is to explore the current state of data processing in a given environment and propose a smart software solution for a filtering system. The theoretical part of the thesis investigates the issues related to processing large data files in an organisation, providing insights for the practical section. The practical part addresses difficulties with various dataset formats, emphasizing the need for an easily usable tool to partially automate the data evaluation process. Based on theoretical and practical knowledge, a filtering system in MATLAB has been designed. This solution not only eliminates manual work but also supports mathematical operations and generates visualizations of test results. The resulting tool is user-friendly, significantly enhancing the efficiency of processing extensive data files. The proposed solution brings technological advancement and measurable benefits for faster and more precise data analysis.

Keywords

Velké datové soubory, Filtrovací systém, Automatizace, MATLAB, Analýza dat.

Language used: Czech

Date on which the thesis was submitted / produced: 14. 5. 2024

Thesis defence

• Supervisor: Ing. Věra Pelantová, Ph.D.

Technical University of Liberec

Faculty of Mechatronics, Informatics and Interdisciplinary Studies

Bachelor programme / field:
Mechatronics / Mechatronika