Esemény alapú rendszerintegráció szerepe és előnyei nagyvállalati környezetben Apache Kafka bevezetése a nagyvállalati infrastruktúrába [titkosított]

Hajdu, János (2021) Esemény alapú rendszerintegráció szerepe és előnyei nagyvállalati környezetben Apache Kafka bevezetése a nagyvállalati infrastruktúrába [titkosított]. UNSPECIFIED thesis, UNSPECIFIED.

Text (Titkosított) HJ597F_SZAKDOLGOZAT_2021-2022-1_nyomtatni.pdf - Accepted Version Restricted to Repository staff only Download (2MB)

Abstract

Kivonat Az információ korában élünk, a folyamatosan keletkező adat volumene exponenciálisan emelkedik, és aki az adatot megfelelően képes kezelni, az piaci előnyre tehet szert versenytársaival szemben. A hatékony adatkezeléshez szükségünk van fizikai eszközökre, feldolgozó szoftverekre és megfelelő hatásfokú módszertanokra. Egy nagyvállalat informatikai infrastruktúrája szolgálhatja ki ezeket a feladatokat, azonban egy ilyen rendszer komplexum bonyolult, szerteágazó technológiai megoldásokat alkalmaz, és az IT érettség különböző fokain készültek. Ahhoz, hogy mindezen diverzitás ellenére hatékonyan együtt tudjanak működni, jól megtervezett, szorosan kontrollált integrációra van szükségünk. A valós idejű adatfeldolgozás egyik alapvető eleme a vállalat hatáskörén kívül vagy belül való eseményekre történő gyors és helyes reakció. Az integráció típus, ami ezt lehetővé teszi számunkra, az esemény vezérelt integráció. Dolgozatom első felében bemutatom, hogy milyen történelmi hatások és kiváltó okok vezettek az információ mennyiség drasztikus növekedéséhez, valamint tárgyaljuk a feldolgozásához szükséges hardver, szoftver és módszertani elemeket. A dolgozat második felében bemutatom a tevékenységet, aminek kapcsán egy elavult eseménykezelő rendszert kiváltunk, és egy modern, az új kor kihívásainak megfelelő, IT biztonság és üzembiztonság alapján megbízható, dinamikusan skálázható, és funkcionalitását tekintve széles palettával rendelkező rendszert, az Apache Kafkát és a köré épülő esemény feldolgozó infrastruktúrát vezetünk be helyette. Abstract We live in the age of information, the volumen of data generated and processed grows exponentially year after year, and those, who can handle, process and analyze the ever-increasing quantity of data can get the upper hand in the competition of the market. To handle data efficiently, you would need hardwares and devices to store, softwares and applications to process it, and patterns and dataprocessing and handling patterns and methodologies to increase efficiency even further. An enterprise level IT infrastructure should be able to handle those challenges, however they tend to be complex, they contain various implementation technologies, and each component was designed and implemented in a different IT maturity level of the company. We would need a thoroughly planned, closely governed integration strategy, to align the diversity of said separate IT components. Real-time data processing is the ability to react to events happening inside or outside of your company’s sphere of action quickly, correctly, with high efficiency. The type of integration that helps us to reach these goals is part of the Event-Driven Architecture. In the first part of my thesis I look into the history of BigData, I examine the root cause of the exponential growth of data volume produced and processed. Furthermore, we dive into the hardware, software elements and requirements in addition to integration patterns and methodologies of data handling and processing. In the second part of my thesis I will present the activity that lead to decommissioning and old, not supported, out-of-date event handling system, that got replaced with Apache Kafka and connecting event processing stack, which is a modern, up-to-date messaging backbone and software batch, that can handle the important challenges of volume, IT security, dynamic scalability, operation safety, and due to the large open source community and enterprise-grade contributors are able to provide a wide range of funcionality

Item Type:	Thesis (UNSPECIFIED)
Additional Information:	Gazdaságinformatikus szak - Vállalati informatika szakirány
Uncontrolled Keywords:	Rendszerintegráció
Divisions:	Informatika Intézet
Depositing User:	Gergely Beregi
Date Deposited:	12 Jun 2023 09:42
Last Modified:	12 Jun 2023 09:42
URI:	http://szakdolgozat.repo.uniduna.hu/id/eprint/383

Actions (login required)

View Item