メインコンテンツまでスキップ

Sink connector13

sink connector は Kafka topic を読み取り、レコードをターゲットシステムに書き込みます。各ページで connector の作成と設定を説明します。

PostgreSQLconnector のユーザーに PostgreSQL の schema に対する権限を付与したうえで、Kafka topic の変更データをその schema 内のテーブルに配信します。MySQLKafka topic の変更データを MySQL のテーブルに配信します。各 topic は新しいテーブルまたは既存のテーブルにマッピングします。MariaDBKafka topic の変更データを MariaDB のテーブルに配信します。topic ごとに、テーブルを新しく作成するか、既存のテーブルに書き込むかを選択します。SQL ServerKafka topic の変更データを SQL Server のテーブルに配信します。読み取る topic ごとに 1 つのターゲットテーブルを使用します。MongoDB接続 URL を使用して、Kafka topic の変更データを MongoDB の collection に配信します。topic ごとに 1 つの collection を使用します。ClickHouse (logs)Kafka topic のすべての変更を既存の ClickHouse テーブルに新しい行として保持し、変更履歴や監査に利用します。ClickHouse (Replication)source connector が書き込んだ Kafka topic をもとに、ソーステーブルの現在の状態を既存の ClickHouse テーブルに保持します。IcebergIceberg catalog を介して更新と削除を適用し、S3 ストレージ内の Iceberg テーブルをソーステーブルと同期した状態に保ちます。Iceberg (logs)Kafka topic のすべてのレコードを、選択したファイル形式の変更ログとして、S3 ストレージ内の Iceberg テーブルに追記します。OpenSearchKafka topic の変更を OpenSearch に送信します。送信先は、FPT Database Engine のデータベース、または接続文字列で接続するデータベースです。ElasticsearchKafka topic の変更を Elasticsearch の index に登録します。各 topic は新しい index または既存の index にマッピングします。S3Kafka topic の変更を、選択したファイル形式とタイムゾーンで、S3 bucket にファイルとして保存します。RedisKafka topic の変更を Redis データベースに書き込みます。各レコードの保存には、選択した Redis コマンドを使用します。