bering https://blog.hatena.ne.jp/bering/ Bering Note – formerly 流沙河鎮 https://bering.hatenadiary.com/ Current 2024 のセッション「Change Data Capture & Kafka How Slack Transitioned to CDC with Debezium & Kafka Connect」を日本語でまとめます。 Slackは 1 テーブルで 1 兆レコードを超える莫大なデータを効率的かつリアルタイムに分析基盤に取り込むため、Vitess, Kafka, Debezium, Icebergを活用したデータパイプラインへ移行しました. それを実現する上での様々な工夫がまとまっています. 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Fbering.hatenadiary.com%2Fentry%2F2024%2F09%2F29%2F125835" title="Current 2024「DebeziumとKafka ConnectによってSlackは如何にしてCDCへ移行したか」まとめ - Bering Note – formerly 流沙河鎮" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> https://cdn-ak.f.st-hatena.com/images/fotolife/b/bering/20240929/20240929124112.png Hatena Blog https://hatena.blog 2024-09-29 12:58:35 rich https://bering.hatenadiary.com/entry/2024/09/29/125835 1.0 100%