MeetUp Apache NiFi

Der Vortrag behandelt den Aufbau eines Data Warehouses mithilfe von NiFi, die Migration von Daten aus Informix zu PostgreSQL und SQL Servern sowie meine persönlichen Erfahrungen, einschließlich der Vor- und Nachteile dieser Vorgehensweise. 

In diesem Vortrag wird die Anwendung des CDC (Change Data Capture) Postgresql-Prozessors behandelt, der CDC in PostgreSQL über Apache NiFi ermöglicht. Dabei liegt der Fokus auf der Nutzung von Logical Replication und der Entwicklung dieses Prozessors durch die Open-Source-Community. 

Mit Apache NiFi 2.0 steht uns noch Ende dieses Jahres ein neuer Major-Release bevor.

Gerade für Data Engineers und Data Scientists werden viele neue Möglichkeiten geboten. Aber auch die teilweise mühselige Integration eigener Prozessoren wird durch die Python-Integration extrem vereinfacht.

Janis gibt einen kurzen Einblick in Use-Cases, die wir erwarten dürfen. 

JETZT ANMELDEN!