パフォーマンス
この文書のパフォーマンスデータはデフォルト設定に基づいています。高いネットワークレイテンシや高スループット書き込みシナリオに直面している場合は、最適化についてOperation Manualを参照してください。
テストデータセット
- データセット: TPC-H 1T
テストクラスタ構成
| 構成項目 | アップストリーム構成 | ダウンストリーム構成 |
|---|---|---|
| FE | 2 cores 16 GB | 2 cores 16 GB |
| BE | 3 nodes, 16 cores 64 GB, 3*500 GB per node | 3 nodes, 16 cores 64 GB, 3*500 GB per node |
増分同期パフォーマンステスト
テスト手順
- アップストリームクラスタでTPC-H 1Tのデータベースとテーブルを作成する。
- TPC-H 1Tデータベースの同期ジョブを作成する。
- TPC-H 1Tデータのインポート完了を待機し、完了時刻を記録する。
- ダウンストリームデータ同期の完了を待機し、完了時刻を記録する。
テスト結論
増分同期時間差: 33秒
フル同期パフォーマンステスト
テスト手順
- アップストリームクラスタでTPC-H 1Tのデータベースとテーブル情報を作成し、データインポートを完了して完了時刻を記録する。
- TPC-H 1Tデータベースの同期ジョブを作成する。
- ダウンストリームデータ同期の完了を待機し、完了時刻を記録する。
テスト結論
フル同期時間差: 6分1秒
Flink同期パフォーマンステスト
テスト手順
- Flinkを使用してアップストリームで100,000,000件のレコードをインポートする。
- ライブラリとテーブルの同期ジョブを作成する。
- 各段階(例:1,000,000件、2,000,000件など)でダウンストリーム同期完了時刻とアップストリームインポート完了時刻の差を観察する。
- アップストリームでの最後のインポート完了時刻を記録する。
- ダウンストリーム同期完了時刻を記録する。
テスト結論
各段階でのラグ時間は5秒以内に維持されています。