パフォーマンス
この文書のパフォーマンスデータはデフォルト設定に基づいています。高いネットワーク遅延や高スループットの書き込みシナリオに直面している場合は、最適化についてOperation Manualを参照してください。
テストデータセット
- データセット: TPC-H 1T
テストクラスタ構成
| 構成項目 | アップストリーム構成 | ダウンストリーム構成 |
|---|---|---|
| FE | 2 cores 16 GB | 2 cores 16 GB |
| BE | 3 nodes, 16 cores 64 GB, 3*500 GB per node | 3 nodes, 16 cores 64 GB, 3*500 GB per node |
増分同期パフォーマンステスト
テスト手順
- アップストリームクラスタでTPC-H 1Tのデータベースとテーブルを作成する。
- TPC-H 1Tデータベースの同期ジョブを作成する。
- TPC-H 1Tデータのインポート完了を待ち、完了時刻を記録する。
- ダウンストリームデータの同期完了を待ち、完了時刻を記録する。
テスト結論
増分同期時間差: 33秒
全量同期パフォーマンステスト
テスト手順
- アップストリームクラスタでTPC-H 1Tのデータベースとテーブル情報を作成し、データインポートを完了して、完了時刻を記録する。
- TPC-H 1Tデータベースの同期ジョブを作成する。
- ダウンストリームデータの同期完了を待ち、完了時刻を記録する。
テスト結論
全量同期時間差: 6分1秒
Flink同期パフォーマンステスト
テスト手順
- Flinkを使用してアップストリームで100,000,000レコードをインポートする。
- ライブラリとテーブルの同期ジョブを作成する。
- 各段階(例:1,000,000レコード、2,000,000レコードなど)でダウンストリーム同期完了時刻とアップストリームインポート完了時刻の差を観察する。
- アップストリームで最後のインポート完了時刻を記録する。
- ダウンストリーム同期完了時刻を記録する。
テスト結論
各段階での遅延時間は5秒以内に維持されます。