Apache Kafkaยฎ๏ธ ๋น์ฉ ์ ๊ฐ ๋ฐฉ๋ฒ ๋ฐ ์ต์ ์ ๋น์ฉ ์ค๊ณ ์๋ด ์จ๋น๋ | ์์ธํ ์์๋ณด๋ ค๋ฉด ์ง๊ธ ๋ฑ๋กํ์ธ์
๋ก๊ทธ์ธ ์์ ํ์ ๋ฌธ์
Confluent์ Apache Kafka์ ์ฐจ์ด์ ์์ธํ ์์๋ณด๊ธฐ
๋น๋ํ๋ ์ฌ๋๋ค์ ์ํด ๊ตฌ์ถ ๋ฐ ์ค๊ณ๋ ํ๋ซํผ ์์๋ณด๊ธฐ
๋น์ฆ๋์ค ์ ๋ฐ์ ๊ฑธ์ณ ๋ฐ์ดํฐ์ ๊ฐ์น ํ์ฉ
Confluent ๊ณ ๊ฐ์ ์ฌ์ฉ ํ๊ธฐ ๋ฐ ์ฌ๋ก ์ฐ๊ตฌ ์ดํด๋ณด๊ธฐ
ํํธ๋๋ฅผ ์ฐพ๊ฑฐ๋ ๋น์ฌ์ ํํธ๋ ํ๋ก๊ทธ๋จ์ ์ดํด๋ณด์ธ์
๋ฐฐํฌ๋ฅผ ์ ํํ์ธ์.
์กฐ์ง ์ ์ฒด์์ ๋ฐ์ดํฐ ์คํธ๋ฆฌ๋ฐ, ์ฐ๊ฒฐ, ๊ด๋ฆฌ ๋ฐ ์ฒ๋ฆฌ
์ค์๊ฐ ๋ฐ์ดํฐ ์ํคํ ์ฒ ๊ตฌ์ถ
๋ฐ์ดํฐ ์์ฝ์์คํ ์ ์์ฌ์ด ํตํฉ
๊ณ ํ์ง ๋ฐ์ดํฐ์ ๋ํ ์ก์ธ์ค ๋ณดํธํ
์ค์๊ฐ ๋ฐ์ดํฐ๋ฅผ ๋ณํ, ๋ถ์ ๋ฐ ํ์ฉ
ํด๋ฆญ ๋ช ๋ฒ๋ง์ Topics์์ ํ ์ด๋ธ๋ก
Real-time, context-aware AI
์ง๋ฅํ ์ค์๊ฐ ์๋ํ ์ง์
๋ฐฐํฌ๋ฅผ ์ ํํ์ธ์
์์ ๊ด๋ฆฌํ ํด๋ผ์ฐ๋ ๋ค์ดํฐ๋ธ Apache Kafkaยฎ ์๋น์ค๋ก ๋์ฑ ์ค๋งํธํ๊ฒ ์คํธ๋ฆฌ๋ฐ
Confluent์ ์ ์ฒด ๋ฐ์ดํฐ ์คํธ๋ฆฌ๋ฐ ํ๋ซํผ์ ์จํ๋ ๋ฏธ์ค์์ ์คํ ๋ฐ ๊ด๋ฆฌ
Bridge on-premise control with the automation of a cloud service
ํ๋ผ์ด๋น ํด๋ผ์ฐ๋์ Kafka ํธํ ๋ฐ์ดํฐ ์คํธ๋ฆฌ๋ฐ ํ๋ซํผ ๋ฐฐํฌ
๋ฐ์ดํฐ ์คํธ๋ฆฌ๋ฐ ์ฌ์ ์ ์ด๋ ๋จ๊ณ์์๋ ๊ธฐ์ ์ ํฅ์์ํค๋ ๋ฐ ํ์ํ ์ค๋ช ๋์์๊ณผ ํํ ๋ฆฌ์ผ์ ์ฌ๊ธฐ์์ ์ฐพ์ ์ ์์ต๋๋ค.
๊ฐ๊ฒฉ ๊ตฌ์กฐ, ๊ธฐ๋ฅ ๋ฐ ๋ฐฐํฌ ์ต์ ์ ๋ํด ์์ธํ ์์๋ณด๊ธฐ
Confluent๋ฅผ ํตํ ๋น์ฉ ์ ๊ฐ ํจ๊ณผ๋ฅผ ์์ฒด ๊ด๋ฆฌํ Kafka ๋ฐฐํฌ์ ๋น๊ตํด๋ณด๊ธฐ
์ฌ์ฉ ์ฌ๋ก
์์ค์์ ๋ฐ์ดํฐ๋ฅผ ์ ๋ฆฌํ๊ณ ๊ด๋ฆฌํ๋ฉฐ, ํ ํฝ์ Iceberg ๋๋ Delta Lake ํ ์ด๋ธ๋ก ๋ณํ
์ ๋ขฐํ ์ ์๋ ์ค์๊ฐ ์ปจํ ์คํธ ๋ฐ์ดํฐ๋ก RAG ๋ฐ ์์ด์ ํธ AI ์ฌ์ฉ ์ฌ๋ก ๊ตฌ์ถํ๊ธฐ
๋ฐ์ดํฐ ์คํธ๋ฆฌ๋ฐ์ผ๋ก ์ด๋ฒคํธ ๊ธฐ๋ฐ ๋ง์ดํฌ๋ก์๋น์ค ์ ํ๋ฆฌ์ผ์ด์ ์ ๊ตฌ์ถํ๋ ๋ฐฉ๋ฒ ์์๋ณด๊ธฐ
์ผ๋ฐ์ ์ธ ๋ฐ์ดํฐ ์คํธ๋ฆฌ๋ฐ ์ฌ์ฉ ์ฌ๋ก์ ๋ํ ๋ชจ๋ฒ ์ฌ๋ก ์์๋ณด๊ธฐ
์ฐ์
๋ฐ์ดํฐ ์คํธ๋ฆฌ๋ฐ ํ๋ซํผ์ผ๋ก ์ค์๊ฐ AI ์์ด์ ํธ๋ฅผ ๊ตฌ์ถํ๊ณ ํ์ฅํ๋ ๋ฐฉ๋ฒ
์ ์ฉํ ์๋ฃ
๋ฐฑ์, eBook, ๋ณด๊ณ ์ ๋ฐ ๊ธฐํ ์๋ฃ ์ฐพ์๋ณด๊ธฐ
๋ชจ๋ฒ ์ฌ๋ก, ์ ๊ณ ๋ํฅ ๋ฐ ๋ด์ค
์จ๋๋งจ๋ ๋๋ ์์ ๋ ์ธ์ ์ฐพ์๋ณด๊ธฐ
๋ฐ์ดํฐ ์คํธ๋ฆฌ๋ฐ ๊ฐ๋ ์ ๋ํด ์์๋ณด๊ธฐ
์๋ฌธ ๋ฐ ๊ตฌํ ์๋น์ค๋ฅผ ํตํ ์ฑ๊ณต์ ์ธ ๊ฒฐ๊ณผ ๋ณด์ฅ
๊ฐ๋ฐ์ ์๋ฃ
Current์ Data Streaming World Tour๋ถํฐ ์ง์ญ ๊ฐ๋ฐ์ ๋ชจ์์ ์ด๋ฅด๊ธฐ๊น์ง ๋ค์ํ ์๋ฆฌ์์ Confluent ์ ๋ฌธ๊ฐ๋ค๊ณผ ํจ๊ป ๋ฐ์ดํฐ๋ฅผ ํ์ฉํ ์ ์์ต๋๋ค.
ํด๋ฆญ ๋ช ๋ฒ๋ง์ Topics์์ ํ ์ด๋ธ ๋ก
Kafka Summit London 2022 ์ธ์ ๊ณผ ๋ฐํ์๋ฃ ๋ณด๊ธฐ