Real-Time Data Warehouse

Martin Zálepa

Master's thesis

Abstract:

Diplomová práce se zabývá oblastí Business Intelligence a hlavně popisem jednoho z trendů v této oblasti, kterým je přenos dat do datového skladu v reálném čase, tedy vytvořením Real-Time Data Warehouse. Hlavním cílem práce je samotný návrh a implementace technologie Oracle GoldenGate do databázového systému od společnosti Teradata.Autor se v práci zabývá popisem oblasti Business Intelligence a datových skladů, kde se zaměřuje na jejich základní principy, jednotlivé komponenty, které využívají a jejich vztahy mezi nimi, architektury návrhu datových skladů nebo i pomalu se měnící dimenze. Dále v oblasti datových skladů v reálném čase jsou popsány požadavky na takový typ datového skladu a jaké jsou možnosti přístupu k řešení. Také samotná technologie Oracle GoldenGate a její jednotlivé komponenty a funkcionalita je v této práci rozebrána a je klíčová pro další pracování s touto technologií.Na základě využití zmíněných principů a komponent probíhá návrh a implementace technologie Oracle GoldenGate do datového skladu telekomunikační společnosti. Dochází k úpravě architektury datového skladu, k popisu procesů spojených s přenosem dat a samotnému nastavení technologie v daném prostředí. Práce také poukazuje na možnosti řešení problémů s datovém kvalitou a vysokou latencí dat. Mimo jiné dochází i k nahlédnutí k možným způsobům využívání těchto dat z pohledu byznysu.

Abstract:

The diploma thesis deals with the area of Business Intelligence and mainly with the description of one of trends in this area, which is the transfer of data to the data warehouse in real time, therefore result is the creation of a Real-Time Data Warehouse. The main goal of the work is the design and implementation of Oracle GoldenGate technology into the database system from company called Teradata. The author deals with the description of Business Intelligence and data warehouses, where he focuses on their basic principles, the individual components they use and their relationships between them, data warehouse design architectures, or even slowly changing dimensions. Furthermore, in the real-time data warehousing area, the requirements for this type of data warehousing and the possibilities of accessing the solution are described. Also, the Oracle GoldenGate technology itself and its individual components and functionality are discussed in this work and is key for further work with this technology. Based on the use of the mentioned principles and components, the design and implementation of the Oracle GoldenGate technology takes place in the data warehouse of the telecommunications company. The data warehouse architecture is modified, the processes associated with data transfer are described and the technology is set in the given environment. The work also points out the possibilities of solving problems with data quality and high data latency. Among other things, there is an insight into the possible uses of this data from a business perspective.

Abstract:

Diplomová práca sa zaoberá oblasťou Business Intelligence a hlavne popisom jedného z trendov v tejto oblasti, ktorým je prenos dát do dátového skladu v reálnom čase, teda vytvorením Real-Time Data Warehouse. Hlavným cieľom práce je samotný návrh a implementácia technológie Oracle GoldenGate do databázového systému od spoločnosti Teradata. Autor sa v práci zaoberá popisom oblasti Business Intelligence a dátových skladov, kde sa zameriava na ich základné princípy, jednotlivé komponenty ktoré využívajú a ich vzťahy medzi nimi, architektúry návrhu dátových skladov, alebo aj pomaly sa meniace dimenzie. Ďalej v oblasti dátových skladov v reálnom čase sú popísané požiadavky na takýto typ dátového skladu a aké sú možnosti prístupu k riešeniu. Taktiež samotná technológia Oracle GoldenGate a jej jednotlivé komponenty a funkcionalita je v tejto práci rozobraná a je kľúčová pre ďalšie pracovanie s touto technológiou. Na základe využitia spomínaných princípov a komponent prebieha návrh a implementácia technológie Oracle GoldenGate do dátového skladu telekomunikačnej spoločnosti. Dochádza k úprave architektúry dátového skladu, k popisu procesov spojených s prenosom dát a samotnému nastaveniu technológie v danom prostredí. Práca taktiež poukazuje na možnosti riešenia problémov s dátovom kvalitou a vysokou latenciou dát. Mimo iného dochádza aj k nahliadnutiu k možným využitiam týchto dát z pohľadu biznisu.

Keywords

Business Intelligence, datové sklady, replikát, Oracle GoldenGate, datové sklady v reálnem čase

Keywords

Oralce GoldenGate, Real-Time Data Warehouse, Replicat, Data Warehouse, Business Intelligence

Keywords

Business Intelligence, dátové sklady, Oracle GoldenGate, dátové sklady v reálnom čase, replikát

Language used: Slovak

Date on which the thesis was submitted / produced: 26. 6. 2019

Thesis defence

• Date of defence: 9. 6. 2020
• Supervisor: Jan Pour
• Reader: Ondřej Vašíček

Vysoká škola ekonomická v Praze

Master programme / field:
Aplikovaná informatika / Informační systémy a technologie