A Magyar Telekom adattöltő folyamatainak optimalizálása adatbehozatali keretrendszer fejlesztésével

Saved in:
Bibliographic Details
Main Author: Balla Péter
Other Authors: Farkas András
Hidelmayer Csicsman József
Format: Thesis
Kulcsszavak:adatbázis
adatfeldolgozás
adatszerkezetek
adattárház
adattervezés
Online Access:http://dolgozattar.uni-bge.hu/39007
Description
Abstract:Dolgozatomban az adattöltési folyamatok optimalizálási lehetőségeivel foglalkozom. A kutatás keretében egy adatbehozatali keretrendszert fejlesztettem a Magyar Telekom számára. Két központi vezérlő programot készítettem, melyek által irányított adattöltő folyamatok relációs adatbázisban tárolt konfiguráció alapján Message Queue és távoli fájlrendszer forrásokból érkeztetnek meg adatokat a vállalat modern adattárházába, egy Hadoop tárolóba. A projekt hatókörébe tartozott még egy konfigurálásra használható grafikus felület, illetve egy monitorozást támogató riport fejlesztése. A dolgozatban az elméleti, módszertani háttér elemzését követően ismertetem a használt technológiákat és a vállalati infrastruktúrát, amelybe a programot bele kellett illeszteni. Ezt követően bemutatom az elkészült alkalmazást.