CDC（変更データキャプチャ） しーでぃーしー

---

CDC（変更データキャプチャ）とは

CDC（Change Data Capture：変更データキャプチャ） とは、データベースのINSERT・UPDATE・DELETE の変更を検出して、他のシステムにリアルタイムで伝播させるデータ統合技術です。

従来のバッチ処理（夜間に全データを一括同期）に代わり、CDCによりデータウェアハウス・検索エンジン・キャッシュへのリアルタイム同期が実現します。

---

CDCの仕組み

バイナリログ（BinLog）方式

最も一般的な実装。MySQLのbinlog・PostgreSQLのWAL（Write-Ahead Log）など、DBが内部で保持する更新ログを読み取って変更を検出します。

アプリケーション
    ↓ INSERT/UPDATE/DELETE
プライマリDB（MySQL/PostgreSQL）
    ↓ バイナリログ/WAL
CDC エンジン（Debezium等）
    ↓ メッセージストリーム（Kafka等）
各下流システム（DWH・Elasticsearch・Redis等）

---

主なCDCツール

ツール	開発元	特徴
Debezium	Red Hat	オープンソース、Kafka統合
AWS DMS	AWS	マネージドDB移行・CDC
Kafka Connect	Confluent	Kafkaエコシステムと統合
Airbyte	Airbyte Inc.	ローコードのデータパイプライン

---

歴史と背景

• 1990年代：大規模DWH構築でバッチ同期の限界が認識
• 2010年代：Apache KafkaとDebeziumの登場でCDCが実用的に
• 現在：マイクロサービスのイベント駆動アーキテクチャでCDCが標準パターンに

---

関連用語

• 監査ログ設計 — CDCを活用した監査ログの実装
• ETL/ELT — CDCはELTのリアルタイム版
• データリネージ — CDCパイプラインのリネージ追跡
• レプリケーション — CDCはレプリケーションより細粒度の変更追跡
• イベント駆動アーキテクチャ — CDCとイベントストリームの連携