新機能
ストレージと圧縮
- 設定可能なテーブル圧縮タイプ — テーブルごとに特定の圧縮アルゴリズムを選択できます。
#56276
- アダプティブcompaction書き込みキャッシュ — ベースcompaction rowsetフラッシュ中に書き込みキャッシュを動的に調整します。
#56278
Cloudとオブジェクトストレージ
- Cloudモードクエリ鮮度制御 — データレイテンシと整合性の間にユーザー定義の許容度を追加します。
#56390
- オブジェクトストレージエンドポイント検証の緩和 — プライベートまたはカスタムストレージエンドポイントを有効にします。
#56641
Datalake
- DatalakeのOSSサポート VPC エンドポイント(
dlf/datalake-vpc)。
#56476
- AWS Glue カタログがIAM AssumeRole経由でのS3アクセスをサポートしました。
#57036
- S3 Clientが改良された認証情報管理のために
CustomAwsCredentialsProviderChainを使用するように更新されました。
#56943
機能強化
#56346
- BE REST APIが監視用に
RunningTasks出力を追加しました。
#56781
- トランザクション監視がBRPC書き込み増幅メトリクスを追加しました。
#56832
最適化
クエリ実行とプランナー
COUNT(\*)最適化 — スキャン負荷を軽減するために最小の列を自動選択します。
#56483
- Compactionがスループットを向上させるために空のrowsetをスキップします。
#56768
- ウォームアップ統計が可視性向上のために「スキップされたrowset」メトリクスを追加しました。
#56373
ストレージ層
- Variantカラムキャッシュがスパースカラムの読み取り高速化のために追加されました。
#56730
- セグメントフッターがレイテンシ削減のためにIndex Page Cacheにキャッシュされるようになりました。
#56459
- Recyclerがスループット向上のために並列クリーンアップタスクをサポートします。
#56573
Datalake
- Paimon Time Travelが改良され、スキーマミスマッチが修正されました。
#56338
- Icebergスキャンエラーメッセージの改良とネストされた名前空間のサポート。
#56370, #57035
- レガシーDLFカタログプロパティが削除されました。
#56196, #56505
- JSON Loadが行ベースデータに対してデフォルトで行ごと解析モードになりました。
#56736
バグ修正
Datalake
- Icebergシステムテーブルのclassloaderエラーを修正しました。
#56220
- パーティション値が存在しない場合のIcebergパーティションテーブルの失敗を修正しました。
#57043
- S3AカタログがIAM AssumeRoleプロファイルを適切に使用しない問題を修正しました。
#56250
- マルチ設定オブジェクトストレージカタログのHadoop FileSystemキャッシュを無効にしました。
#57153
クエリ実行とSQLエンジン
COUNTプッシュダウンロジックエラーを修正しました。
#56482
UNIONローカルシャッフル動作のバグを修正しました。
#56556
- OLAPストレージタイプの
IN述語でのクラッシュを修正しました。
#56834
datetimev1のtimestampdiff計算エラーを修正しました。
#56893
explode()関数によるクラッシュを修正しました。
#57002
ストレージとロード
- ソースファイルが存在しない場合のS3 Loadチェック失敗を修正しました。
#56376
- FileCacheクリーンアップのクラッシュを修正しました。
#56584
- MOW圧縮でdeleteビットマップがクリアされない問題を修正しました。
#56785
- 小さなファイルに対するOutfile bz2圧縮失敗を修正しました。
#57041
CloudとRecyclerメカニズム
- Warmupがマルチセグメントrowsetをスキップする問題を修正しました。
#56680
- 参照キャプチャでのCloudTablet Warmupコアダンプを修正しました。
#56627
- クリーンアップタスクでのRecyclerヌルポインターのクラッシュを修正しました。
#56773
- Cloudモードでキャッチされないパーティション境界エラーを修正しました。
#56968
システムとその他
- FEの不正なPrometheusメトリクス形式を修正しました。
#57082
- FE再起動後のauto-increment値が不正になる問題を修正しました。
#57118
SHOW CREATE VIEWでカラム定義が欠落する問題を修正しました。
#57045
- ProfileデータサンプリングでのHDFS Readerクラッシュを修正しました。
#56950