A Magyar Telekom adattöltő folyamatainak optimalizálása adatbehozatali keretrendszer fejlesztésével
Saved in:
Main Author: | |
---|---|
Other Authors: | |
Format: | Thesis |
Kulcsszavak: | adatbázis adatfeldolgozás adatszerkezetek adattárház adattervezés |
Online Access: | http://dolgozattar.uni-bge.hu/39007 |
Abstract: | Dolgozatomban az adattöltési folyamatok optimalizálási lehetőségeivel foglalkozom. A kutatás keretében egy adatbehozatali keretrendszert fejlesztettem a Magyar Telekom számára. Két központi vezérlő programot készítettem, melyek által irányított adattöltő folyamatok relációs adatbázisban tárolt konfiguráció alapján Message Queue és távoli fájlrendszer forrásokból érkeztetnek meg adatokat a vállalat modern adattárházába, egy Hadoop tárolóba. A projekt hatókörébe tartozott még egy konfigurálásra használható grafikus felület, illetve egy monitorozást támogató riport fejlesztése. A dolgozatban az elméleti, módszertani háttér elemzését követően ismertetem a használt technológiákat és a vállalati infrastruktúrát, amelybe a programot bele kellett illeszteni. Ezt követően bemutatom az elkészült alkalmazást. |
---|