Freight Clusters: Up to 90% savings at GBps+ scale | Learn more

Confluent Tableflow vereint Analyse und Betrieb mit Daten-Streaming

Tableflow erleichtert die Konvertierung von Streaming-Daten zu Apache Iceberg®-Tabellen, um Data Warehouses, Data Lakes und Analytics Engines zu versorgen.

Vollständig verwaltete Konnektoren können sich jetzt sicher mit privaten Endpunkten verbinden. Dies ermöglicht eine maximale Uptime SLA von 99,99 % bei niedrigem Preis.

Stream Governance setzt automatisch wichtige Data-Governance-Funktionen für alle Confluent Cloud-Kunden um. Das erlaubt sicheres Teilen und Skalierbarkeit.

Confluent, Inc. (NASDAQ:CFLT), der Pionier im Bereich Daten-Streaming, kündigt neue Confluent-Cloud-Funktionen an, mit denen Kunden Daten leichter streamen, verbinden, verwalten und verarbeiten können. So erhalten sie nahtlose Erfahrungen, zeitnahe Erkenntnisse und schützen gleichzeitig ihre Daten. Confluent Tableflow wandelt mit einem einzigen Klick Apache Kafka® Topics und die zugehörigen Schemata in Apache-Iceberg-Tabellen um. Dadurch können Data Lakes und Data Warehouses besser versorgt werden. Die vollständig verwalteten Konnektoren von Confluent wurden um neue sichere Netzwerkpfade bei bis zu 50 Prozent niedrigeren Durchsatzkosten erweitert. Das macht Integrationen umfassender, sicherer und kostengünstiger. Stream Governance ist jetzt standardmäßig in allen Regionen freigeschaltet. Ein verbessertes SLA für Schema Registry erleichtert die sichere Skalierung und gemeinsame Nutzung von Datenströmen, egal wo sie verwendet werden.

Unternehmen müssen permanent Entscheidungen treffen, um Kosten zu optimieren, Umsätze zu steigern und Innovationen voranzutreiben. Dazu müssen sie die traditionell voneinander getrennten Datenbestände für Betrieb und Analysen miteinander verbinden. Zu den betrieblichen Daten zählen Datensätze aus SaaS-Anwendungen, benutzerdefinierte Apps und Datenbanken. Diese werden von Unternehmensapplikationen wie Oracle, Salesforce und ServiceNow genutzt. Der analytische Bereich umfasst Data Warehouses, Data Lakes und Analytics Engines, die Analysen und Entscheidungsfindung unterstützen und Datenströme sowie historische Tabellen nutzen, um Abfragen und verschiedene analytische Funktionen auszuführen.

„Das Hauptproblem für moderne Unternehmen ist der hohe Vernetzungsgrad, den ihre operativen und analytischen Systeme benötigen. Häufig basiert diese Vernetzung jedoch auf Direktverbindungen zwischen Dutzenden Tools“, sagt Shaun Clowes, Chief Product Officer bei Confluent. „Das führt zu einem Datenchaos, das mühsam zu navigieren ist und dem Unternehmen Echtzeit-Einblicke erschwert.“

Unternehmen nutzen Kafka als Standard für Daten-Streaming in der Betriebsumgebung. Iceberg hingegen benutzen sie als offenes Standardtabellenformat für Datensätze in der Analyseumgebung. Mit Iceberg können Unternehmen Daten über Teams und Plattformen hinweg austauschen und gleichzeitig Tabellen auf dem neuesten Stand halten, wenn sich Daten verändern.

Kafka-Kunden wollen Iceberg einsetzen, um die steigende Nachfrage nach Streaming- und Batch-basierten Analysen zu befriedigen. Viele Unternehmen müssen daher komplexe Migrationen durchführen, die ressourcenintensiv sein können und veraltete, nicht vertrauenswürdige Daten aber auch erhöhte Kosten zur Folge haben.

„Offene Standards wie Apache Kafka und Apache Iceberg sind beliebt für das Daten-Streaming und auch das Management von Daten in Tabellen für Analytics Engines“, ergänzt Stewart Bond, Vice President of Data Intelligence and Integration Software bei IDC. „Es gibt immer noch Herausforderungen bei der Integration von Echtzeitdaten zwischen operativen Datenbanken und Analysesystemen. Unternehmen sollten nach einer Lösung suchen, die die Trennung von operativen und analytischen Daten beseitigt, sowie die Komplexität von Migrationen, Datenformaten und Schemata bewältigt.“

Tableflow vereinfacht das Einspeisen von Data Warehouses und Data Lakes für Analysen

Tableflow, eine neue Funktion von Confluent Cloud, kann mit einem Klick Topics und Schemata in Iceberg-Tabellen umwandeln. Damit lassen sich beliebige Data Warehouses, Data Lakes oder Analytics Engines für Echtzeit- oder Batch-Verarbeitung versorgen. Tableflow arbeitet mit den bestehenden Funktionen der Daten-Streaming-Plattform von Confluent, einschließlich Stream-Governance-Funktionen und Stream Processing mit Apache Flink und verbindet operative und analytische Daten.

Mit Tableflow können Kunden:

  • Kafka-Topics mit einem Klick als Iceberg-Tabellen freigeben, zusammen mit allen zugehörigen Schemata.
  • Iceberg-Tabellen aktuell halten, da diese kontinuierlich mit den neuesten Streaming-Daten aus Unternehmen und Quellsystemen versorgt werden.
  • Datenprodukte mit hoher Qualität bereitstellen, indem die Leistung der Daten-Streaming-Plattform mit Stream Governance und serverlosem Flink kombiniert wird, um so die Daten im Stream zu bereinigen, zu verarbeiten oder anzureichern. Dadurch landen nur hochwertige Datenprodukte im Daten-Lake.

Tableflow ist derzeit im Rahmen eines Early-Access-Programms verfügbar und wird in Kürze für alle Confluent-Cloud-Kunden bereitgestellt.

Weitere Cloud-Innovationen

Connect steigert Sicherheit sowie Benutzerfreundlichkeit und optimiert die Kosten für ein Portfolio von mehr als 80 vollständig verwalteten Konnektoren

Um ein zentrales Nervensystem für ein Unternehmen aufzubauen, müssen Anwender alle ihre Datensysteme verbinden können. Konnektoren gehen die Herausforderungen herkömmlicher Datenarchitekturen an. Sie bekämpfen Datensilos, verbessern die Datenqualität und verhindern ungeplante Ausfallzeiten, indem sie Datensysteme und Anwendungen als Quellen nahtlos mit Confluent Cloud verbinden. Confluent erweitert fortlaufend die Konnektoren, die eine zentrale Komponente der Daten-Streaming-Plattform darstellen. So können immer mehr Integrationen schnell, reibungslos und sicher durchgeführt werden.

Mit den neuen Upgrades für Connect können Confluent-Kunden:

  • Sichere Verbindungen zu kritischen Datensystemen in privaten Netzwerken mit DNS-Weiterleitung und Egress Access Points schaffen
  • Zuverlässig Konnektoren in Sekundenschnelle mit Konfigurationsvalidierungen in Echtzeit und einer Betriebszeit von 99,99 % SLA bereitstellen.
  • Kostengünstige Daten streamen in jeder Größenordnung mit einem bis zu 50% reduzierten Datenübertragungsdurchsatz von 0,025 USD/GB.

Um den vollen Wert von Echtzeitdaten zu erschließen, ist umfassende Konnektivität mit allen Datensystemen und Anwendungen erforderlich. Das gemeinsam mit den Confluent-Technologiepartnern entwickelte Partnerprogramm Connect with Confluent (CwC) erweitert das Daten-Streaming-Ökosystem und bietet einfachen Zugriff auf vollständig verwaltete Datenströme direkt in allen Tools, mit denen die Teams bereits arbeiten. Das vereinfacht die Entwicklung von Echtzeit-Datenprodukten zur gemeinsamen Nutzung im gesamten Unternehmen.

Seit dem Start von CwC im vergangenen Juli mit 17 Technologiepartnern hat das Programm einen enormen Zuwachs verzeichnet. Aktuell umfasst das Programm mehr als 40 Partnerintegrationen. So sind auch in diesem Quartal neue Partner dazugekommen, darunter Advantco, Aklivity, Arroyo, Asapio, Census, EMQX, Kinetica, Nstream, Redis, SingleStore, Squid und Superblocks. Sie alle haben neue Confluent-Integrationen in ihre Anwendungen eingebaut. __ Erweiterte Stream Governance steigert Verfügbarkeit und Zuverlässigkeit__

Angesichts des aktuell verstärkten Fokus auf Governance und Compliance erleichtert es Confluent seinen Kunden, die wichtigsten Stream-Governance-Funktionen zu nutzen. Ab sofort wird Stream Governance für alle Confluent-Cloud-Kunden automatisch in ihren Umgebungen aktiviert und bietet einfachen Zugriff auf Schlüsselfunktionen. Dazu zählen Schema Registry, Data Portal, Stream Lineage in Echtzeit und mehr – inklusive Support in allen Confluent-Cloud-Regionen.

Schema Registry ist eine wichtige Komponente für die Steuerung von Datenströmen und hilft Teams, universelle Datenstandards durchzusetzen. Dadurch können sie Datenqualität sowie -konsistenz sicherstellen und gleichzeitig die betriebliche Komplexität reduzieren. Die in Schema Registry gespeicherten Schemata müssen für Teams jederzeit zugänglich sein, da sonst Datenkompatibilitätsfehler und erhöhte Kosten drohen. Um diese Risiken zu minimieren, bietet Stream Governance Advanced jetzt SLAs von 99,99 % für Schema Registry. So können Unternehmen Unterbrechungen kritischer Workflows vermeiden und Compliance-Vorschriften bewältigen. Darüber hinaus werden mit den in Tableflow integrierten Stream-Governance-Funktionen die Vorteile der verbesserten SLAs für Schema Registry bald auch auf Iceberg-Tabellen erweitert.

Enterprise Clusters bieten mehr Kosteneinsparungen in mehr Clouds

Confluent hat vor kurzem neue Enterprise Clusters angekündigt. Diese bieten dieselben Vorteile wie die anderen Confluent Cloud Clusters. Dazu zählen branchenführende SLAs von 99,99 % und ein umfassendes Ökosystem von Tools für Unternehmen sowie verbesserte Sicherheit durch private Netzwerke. Teams können dadurch strenge Sicherheits- und Netzwerkanforderungen einhalten und gleichzeitig die Ressourcen- und Kosteneffizienz optimieren. Die Skalierung der Enterprise Clusters erfolgt automatisch basierend auf der Arbeitslast, ganz ohne manuelle Eingriffe. Mit neuen Fortschritten in Kora bieten Enterprise Clusters noch mehr Kosteneinsparungen bei einem niedrigeren Einstiegspunkt und reduzierten Durchsatzkosten. Enterprise Clusters sind sowohl in AWS als auch in Microsoft Azure verfügbar.

Erfahren Sie mehr beim Kafka Summit London 2024

Seien Sie dabei, wenn das Confluent-Team auf der Keynote des Kafka Summit London 2024 am Dienstag, den 19. März 2024, um 10:00 Uhr GMT seine Vision von Streaming-Data-Produkten mit Apache Kafka vorstellt. Registrieren Sie sich hier für den kostenlosen Livestream-Zugang. Eine Aufzeichnung der Keynote-Präsentation wird hier verfügbar sein.

Während der Keynote werden keine Informationen zu den Finanzzahlen bekannt gegeben. Confluent hat die in dieser Mitteilung und auf der Keynote angekündigten Produktpreisänderungen in seinem am 7. Februar 2024 bekannt gegebenen Finanzausblick für das erste Quartal 2024 und das Geschäftsjahr 2024 berücksichtigt.

Zusätzliche Ressourcen

Über Confluent

Confluent ist Vorreiter einer grundlegend neuen Kategorie von Dateninfrastruktur, die sich auf Daten in Bewegung konzentriert. Die zentrale Cloud-native Plattform von Confluent fungiert als intelligentes Nervensystem und ermöglicht, dass "Data in Motion" in Echtzeit aus verschiedenen Quellen kontinuierlich durch das gesamte Unternehmen fließen.

Mit Confluent können Unternehmen den neuen geschäftlichen Anforderungen gerecht werden, die darin bestehen, umfassende, digitale Kundenerlebnisse im Front-End-Bereich zu liefern und auf hochentwickelte, softwaregesteuerte Back-End-Abläufe in Echtzeit umzustellen.

Mehr erfahren auf: www.confluent.io

Confluent und zugehörige Marken sind Marken oder eingetragene Marken von Confluent, Inc.