Build Predictive Machine Learning with Flink | Workshop on Dec 18 | Register Now

Online Talk

ゼロからの構築 : Kafka Connect の概念を学ぶ

今すぐ登録

オンデマンドで利用可能

ストリーミングプラットフォームにおいては、Apache Kafka® を信頼性と拡張性に優れた方法で他のシステムと統合することが非常に重要になります。幸い、Apache Kafka には、Kafka 内外でのストリーミング統合を可能にする Connect API が含まれています。他のテクノロジーと同様、そのアーキテクチャとデプロイパターンを理解することが上手な利用のための鍵となり、うまくいかなかった場合にどこを確認すべきかを把握することも重要です。

このトークでは、Apache Kafka Connect の主要な設計コンセプトと、スタンドアロンと分散デプロイモードの長所と短所について説明しています。データベースからデータをストリーミングし、Elasticsearch などのターゲットに出力するための Apache Kafka Connect を使用したパイプラインの構築のライブデモを行います。途中でいくつかの問題が発生した場合も、Apache Kafka Connect で発生する一般的な問題を系統的に診断して解決する実践的な作業を行います。その後、Single Message Transforms やコンテナーへの Kafka Connect の展開など、より高度なトピックについて議論してトークを終了します。

Robin is a Principal DevEx Engineer at Decodable as well as an Oracle Groundbreaker Ambassador. His career has always involved data, from the old worlds of COBOL and DB2, through the worlds of Oracle and Hadoop, and into the current world with Kafka. His particular interests are analytics, systems architecture, performance testing and optimization. He blogs at http://cnfl.io/rmoff and http://rmoff.net/ and can be found tweeting grumpy geek thoughts as @rmoff. Outside of work he enjoys drinking good beer and eating fried breakfasts, although generally not at the same time.