ライブデモ : Confluent を使用したスケーラブルなイベントドリブン型マイクロサービスの構築 | 今すぐ登録

Online Talk

ゼロからの構築 : Kafka Connect の概念を学ぶ

今すぐ登録

オンデマンドで利用可能

ストリーミングプラットフォームにおいては、Apache Kafka® を信頼性と拡張性に優れた方法で他のシステムと統合することが非常に重要になります。幸い、Apache Kafka には、Kafka 内外でのストリーミング統合を可能にする Connect API が含まれています。他のテクノロジーと同様、そのアーキテクチャとデプロイパターンを理解することが上手な利用のための鍵となり、うまくいかなかった場合にどこを確認すべきかを把握することも重要です。

このトークでは、Apache Kafka Connect の主要な設計コンセプトと、スタンドアロンと分散デプロイモードの長所と短所について説明しています。データベースからデータをストリーミングし、Elasticsearch などのターゲットに出力するための Apache Kafka Connect を使用したパイプラインの構築のライブデモを行います。途中でいくつかの問題が発生した場合も、Apache Kafka Connect で発生する一般的な問題を系統的に診断して解決する実践的な作業を行います。その後、Single Message Transforms やコンテナーへの Kafka Connect の展開など、より高度なトピックについて議論してトークを終了します。

Robin は Confluent の DevRel チームで働いています。彼のデータエンジニアリングのキャリアは、COBOL を使ってメインフレーム上にデータウェアハウスを構築するところから始まりました。その後 Oracle のアナリティクスソリューションの開発を経て、近年では Kafka エコシステムとモダンなデータストリーミングの分野で活躍しています。仕事以外では、ランニングやおいしいビール、揚げ物中心の朝食が大好きです(もっとも、これらを同時に楽しむことはめったにありませんが)。