Streaming Data mit Apache Kafka

infologistix Leistungsangebot: Big-Data

In vielen Unternehmen sind aktuell relationale Datenbanken als Data Warehouses (DWHs) im Einsatz, die Ende der 1990er oder in den frühen 2000er Jahren konzipiert wurden.

In der Regel erfolgt Datenbewirtschaftung der DWHs durch ETL-Systeme und ein Automatisierungssystem, das die häufig batchweise ablaufenden Prozesse steuert.

Diese Architektur erschwert allerdings die Umsetzung vieler Big Data Konzepte, in denen Granulardaten – zunehmend auch Streaming Data – aus den Fachbereichen genutzt werden sollen.

Sehr häufig entsteht so das Bild eines Gegensatzes. Auf der einen Seite die batchweise (langsame) Verarbeitung im DWH und auf der anderen Seite die schnelle, Ereignis-gesteuerte (event driven) Verarbeitung durch Data-Streaming Systeme, wie z.B. Apache Kafka.

Aufgrund unserer langjährigen Erfahrungen bei Design, Entwicklung und Realisierung von DWH-Architekturen und als Partner der Confluent Inc., sehen wir in Apache Kafka vor allem eine neue, vielseitige Plattform, mit der „klassische“, ETL-basierte Architekturen durch eine flexible und skalierbare Hybrid-Architektur modernisiert und erweitert werden können.

infologistix Leistungen: Streaming Data

Die Vorteile dieses Hybridansatzes liegen vor allem darin, dass es zu keinem radikalen „Bruch“ bei der Datenverarbeitung im Unternehmen kommt. Zudem entsteht durch die parallel laufenden und miteinander verbundenen Systeme kein neues „Silo“, sondern eine übergreifende Plattform, die zu einer hohen Datenverfügbarkeit beiträgt und vielseitig genutzt werden kann:

Sie möchten mehr Informationen zum Thema
"Streaming Data"?

Hier gibt es das infologistix Handout “Event-Streaming und ETL – Digitaler Wandel mit Apache Kafka”
zum kostenfreien Download.

Scroll to Top
infologistix Leistungsangebot: Big-Data

Download Handout "Streaming Data"

Bitte geben Sie hier Ihre E-Mail-Adresse ein, Sie bekommen an diese dann umgehend den Link zum Download zugesandt und erhalten Updates bei infologistix-Neuigkeiten.