パフォーマンス
このドキュメントのパフォーマンスデータはデフォルト設定に基づいています。高いネットワークレイテンシや高スループットの書き込みシナリオに直面している場合は、最適化についてOperation Manualを参照してください。
テストデータセット
- データセット: TPC-H 1T
テストクラスタ設定
| 設定項目 | アップストリーム設定 | ダウンストリーム設定 |
|---|---|---|
| FE | 2 cores 16 GB | 2 cores 16 GB |
| BE | 3 nodes, 16 cores 64 GB, 3*500 GB per node | 3 nodes, 16 cores 64 GB, 3*500 GB per node |
インクリメンタル同期パフォーマンステスト
テスト手順
- アップストリームクラスタでTPC-H 1T用のデータベースとテーブルを作成します。
- TPC-H 1Tデータベースの同期ジョブを作成します。
- TPC-H 1Tデータインポートの完了を待ち、完了時間を記録します。
- ダウンストリームデータ同期の完了を待ち、完了時間を記録します。
テスト結論
インクリメンタル同期時間差:33秒
フル同期パフォーマンステスト
テスト手順
- アップストリームクラスタでTPC-H 1Tのライブラリとテーブル情報を作成し、データインポートを完了して、完了時間を記録します。
- TPC-H 1Tデータベースの同期ジョブを作成します。
- ダウンストリームデータ同期の完了を待ち、完了時間を記録します。
テスト結論
フル同期時間差:6分1秒
Flink同期パフォーマンステスト
テスト手順
- Flinkを使用してアップストリームに100,000,000レコードをインポートします。
- ライブラリとテーブルの同期ジョブを作成します。
- 各段階(例:1,000,000レコード、2,000,000レコードなど)でダウンストリーム同期完了時間とアップストリームインポート完了時間の差を観察します。
- アップストリームでの最後のインポート完了時間を記録します。
- ダウンストリーム同期完了時間を記録します。
テスト結論
各段階での遅延時間は5秒以内に維持されます。