Kitchen Series: IoT Sensor-Analysen mit Apache Kafka, KSQL und TensorFlow

Die schnell wachsende Welt der Datenstromverarbeitung kann entmutigend sein, da neue Konzepte wie verschiedene Arten von Zeitsemantiken, Aggregationen, Change Logs und Frameworks zu beherrschen sind. KSQL ist eine Open-Source, Apache 2.0 lizenzierte Streaming-SQL-Engine basierend auf Apache Kafka, die all dies vereinfacht und die Stream-Verarbeitung für jeden verfügbar macht, ohne dass Source Code geschrieben werden muss.
Dieser Vortrag nutzt Kafka und KSQL am Beispiel IoT-Sensoranalyse für kontinuierliche Health Checks. Eine Demo zeigt, wie man Machine Learning Modelle erstellt und mit Frameworks wie TensorFlow, DeepLearning4J oder H2O in unternehmenskritischen und skalierbaren Echtzeitanwendungen einsetzt.

Inhalte des Online Talks:
- Verwendung von Apache Kafka als Streaming-Plattform, um große Datenmengen von Tausenden von IoT-Geräten aufzunehmen, zu speichern, zu verarbeiten und weiterzuleiten.
- Ermöglichung von Streaming-Integration und -Analyse mit KSQL ohne externe große Daten-Cluster und ohne die Notwendigkeit, Source Code zu schreiben
- Leichte Anwendung von Machine-Learning-Modellen innerhalb des Kafka-Ökosystems
- Anwendungsfall aus der Health Check-Sensoranalytik: End-to-End-Szenario für die Verarbeitung von IoT-Streams

Sprecher: Kai Waehner, Technology Evangelist, Confluent