Návrh aplikace pro analýzu velkých dat s využitím algoritmů strojového učení

Ing. Martin Burdík

Master's thesis

Design of Application for Big Data Analysis Based on Machine Learning

Anotácia:

Velká data jsou data, které není možné analyzovat konvenčním přístupem na jednom zařízení. Jednou z možností je využít distribuovaného zpracování pro rozložení zátěže mezi více zařízení a data zpracovat s využitím strojového učení. Tímto přístupem je možné z velkého množství nestrukturovaných dat získat cenné znalosti. Tyto přístupy jsou popsány v teoretické částí práce. Mimo jiné se ukázalo, že distribuované zpracování má kromě výhod také určité nevýhody. Tyto nevýhody popisuje CAP teorém a je na ně potřeba myslet při návrhu aplikací. V praktické části je navržena aplikace, která na základě analýzy dat doporučuje uživateli produkty. Ukázalo se také, že programovací jazyk Python je díky svým knihovnám kvalitní nástroj, snadno použitelný pro datové analýzy.

Abstract:

Big data are data, which can´t be analyzed by convention methods on a single device. One of possible solutions is to use distributed processing to divide workload across multiple devices and to process data using machine learning. With this approach it is possible to gain valuable knowledge from a large number of unstructured data. These approaches are described in the theoretical part of the thesis. Among other things, it was shown that the distributed processing has advantages as well as certain disadvantages. These disadvantages are described by CAP theorem, and it is needed to think about them while designing applications. In the practical part of this thesis, the application is designed for product recommendation based on the data analysis. It was also shown that the programming language Python is a quality tool that showed a good performance and is easy to use for data analysis.

Kľúčové slová

Velká data, distribuované zpracování, strojové učení, analýza dat, systém pro doporučová-ní

Jazyk práce: Czech

Datum vytvoření / odevzdání či podání práce: 13. 4. 2017

Obhajoba závěrečné práce

Tomas Bata University in Zlín

Faculty of Management and Economics

Master programme / odbor:
System Engineering and Informatics / Industrial Engineering