Techtiefen

#13 Data Engineering für Echtzeitdaten


Listen Later

In Folge 13 dreht sich alles um große Datenmengen und ihre Verarbeitung. Dominik Benz erklärt wie Data Engineers Datenstrecken entwickeln und welchen Einfluss aktuelle Entwicklungen wie das Bestreben nach Echtzeitdaten, die DSGVO und Big Data haben. Wir erklären fachliche Grundlagen, wie den Unterschied zwischen System- und Processing Time sowie die Problematik und den Umgang mit den daraus resultierenden “Late Arrivals”. Außerdem widmen wir uns natürlich den wichtigsten Technologien des Big Data Kosmos wie etwa Apache Hadoop, ETL Tools wie Spark- und Nifi sowie dem Message Broker Apache Kafka.

Links: Roaring Elephants Podcast

...more
View all episodesView all episodes
Download on the App Store

TechtiefenBy Nico Kreiling


More shows like Techtiefen

View all
Hotel Matze by Matze Hielscher & Mit Vergnügen

Hotel Matze

137 Listeners