リリース 3.0.5

コミュニティメンバーの皆様、Apache Doris 3.0.5 バージョンが2025年4月28日に正式リリースされました。

クイックダウンロード: https://doris.apache.org/download/

GitHub Release: https://github.com/apache/doris/releases

新機能

レイクハウス

• FE Metricsに カタログ/Database/table 数量監視メトリクスを追加 (#47891)
• MaxCompute カタログ が Timestamp 型をサポート (#48768)

クエリ実行

• URL処理関数を追加：top_level_domain、first_significant_subdomain、cut_to_first_significant_subdomain (#42488)
• Trino互換実装の year_of_week 関数を追加 (#48870)
• percentile_array 関数が Float および Double データ型をサポート (#48094)

Storage-Compute Separation

• コンピュートグループ名前変更サポートを追加 (#46221)

改善

ストレージ

• Compactionタスク生成を高速化してパフォーマンスを向上 (#49547)
• Stream Load が圧縮JSONファイルの取り込みをサポート (#49044)
• 様々な取り込みシナリオのエラーメッセージを強化 (#48436 #47721 #47804 #48638 #48344 #49287 #48009)
• Routine Load に複数のメトリクスを追加 (#49045 #48764)
• Routine Load スケジューリングアルゴリズムを最適化して、単一ジョブの失敗が全体のスケジューリングに影響しないよう改善 (#47847)
• Routine Load システムテーブルを追加 (#49284)
• 高頻度取り込み下でのMerge-On-Write (MOW) テーブルのクエリパフォーマンスを向上 (#48968)
• Key Range クエリのProfile情報表示を強化 (#48191)

Compute-Storage Decoupled

• 複数の File Cache 安定性およびパフォーマンス問題を修正 (#48786 #48623 #48687 #49050 #48318)
• Storage Vault 作成の検証ロジックを改善 (#48073 #48369)

レイクハウス

• Trino Connector カタログ の BE Scanner クロージャロジックを最適化してメモリ解放を高速化 (#47857)
• ClickHouse JDBC カタログ が異なるドライバーバージョンに自動適応 (#46026)

非同期マテリアライズドビュー

• 透過的リライトの計画パフォーマンスを強化 (#48782)
• tvf mv_infos のパフォーマンスを最適化 (#47415)
• 外部テーブルベースのMV構築中のカタログメタデータ更新を無効化してメモリ使用量を削減 (#48767)

クエリオプティマイザー

• キーカラムとパーティションカラムの統計収集パフォーマンスを向上 (#46534)
• クエリ結果のエイリアスがユーザー入力と厳密に一致するよう改善 (#47093)
• 集約演算子での共通部分式抽出後のカラムプルーニングを強化 (#46627)
• 関数バインディング失敗とサポートされていないサブクエリのエラーメッセージを改善 (#47919 #47985)

半構造化データ管理

• json_object 関数が複合型パラメータをサポート (#47779)
• UInt128 の IPv6 型への書き込みサポートを追加 (#48802)
• VARIANT 型の ARRAY フィールドで転置インデックスサポートを有効化 (#47688 #48117)

セキュリティ

• Ranger 認証パフォーマンスを向上 (#49352)

その他

• JVM Metrics インターフェースのパフォーマンスを最適化 (#49380)

バグ修正

ストレージ

• いくつかのエッジケースにおけるデータ正確性問題を修正 (#48056 #48399 #48400 #48748 #48775 #48867 #49165 #49193 #49350 #49710 #49825)
• 完了したトランザクションの時期尚早なクリーンアップを修正 (#49564)
• 部分カラム更新でJSONBのデフォルト値を {} に変更 (#49066)
• Storage-Compute Separation モデルでの delete bitmap 更新ロック解放問題を修正 (#47766)
• ARM アーキテクチャでの Stream Load データ損失を修正 (#49666)
• Insert Into Select でのデータ品質問題に対するエラーURL戻り値の欠落を修正 (#49687)
• マルチテーブル Routine Load データ品質問題のエラーURL報告を修正 (#49130)
• Schema Change 中の Insert Into Values 使用時の不正な結果を修正 (#49338)
• タブレットコミット情報報告によるコアダンプを修正 (#48732)
• S3 Load に Azure China リージョンサポートを追加 (#48642)
• K8s環境での「get image failed」エラーを修正 (#49072)
• 動的パーティションスケジューリングでのCPU消費を削減 (#48577)
• マテリアライズドビュー名前変更後のカラム例外を修正 (#48328)
• Schema Change 失敗後のメモリとファイルキャッシュリークを修正 (#48426)
• 空のパーティションを持つテーブルでのベース compaction 失敗を修正 (#49062)
• 複合型変更でのデータ正確性問題を修正 (#49452)
• コールド compaction でのコアダンプを修正 (#48329)
• 削除操作での累積ポイント停滞を修正 (#47282)
• 大規模フル compaction でのメモリ不足を修正 (#48958)

Compute-Storage Decoupled

• K8s環境でのファイルキャッシュクリーンアップ失敗を修正 (#49199)
• 高頻度取り込み中の読み書きロックによるFE CPUスパイクを修正 (#48564)

レイクハウス

データレイク

• Hive/Icebergテーブルへの同時書き込み中のBEコアダンプを修正 (#49842)
• AWS S3上のHive/Icebergテーブルへの書き込み失敗を修正 (#47162)
• 不正なIceberg Position Deletion読み取りを修正 (#47977)
• Icebergテーブル作成にTencent Cloud COSサポートを追加 (#49885)
• HDFS上のPaimonデータのKerberos認証を修正 (#47192)
• Hudi Jni Scannerでのメモリリークを修正 (#48955)
• MaxCompute カタログでのマルチパーティションリスト読み取りを修正 (#48325)

JDBC

• JDBC カタログからの行数取得時のNPEを修正 (#49442)
• OceanBase Oracleモード接続テストを修正 (#49442)
• 同時JDBC カタログアクセス時のカラム型長さ不整合を修正 (#48541)
• JDBC カタログ BE でのClassloaderリークを修正 (#46912)
• PostgreSQL JDBC カタログでの接続スレッドリークを修正 (#49568)

エクスポート

• EXPORT ジョブがEXPORTING状態でスタックする問題を修正 (#47974)
• 重複ファイルを防ぐためOUTFILE自動リトライを無効化 (#48095)

その他

• FE WebUI経由のTVFクエリ実行時のNPEを修正 (#49213)
• Hadoop Libhdfsスレッドローカルnull pointer例外を修正 (#48280)
• FEのHadoopアクセスでの「Filesystem already closed」エラーを修正 (#48351)
• カタログコメント永続化問題を修正 (#46946)
• Parquet複合型読み取りエラーを修正 (#47734)

非同期マテリアライズドビュー

• 極端なシナリオでのMV構築の遅さを修正 (#48074)
• ネストしたMV透過的リライト失敗を修正 (#48222)

クエリオプティマイザー

• 定数畳み込み計算エラーを修正 (#49225 #47966 #49416 #49087 #49033 #49061 #48895 #48957 #47288 #48641 #49413 #48783)
• ネストしたウィンドウ関数でのORDER BYの予期しないエラーを修正 (#48492)

クエリ実行

• パイプラインタスクスケジューリングのデッドロック/パフォーマンス問題を修正 (#49976 #49007)
• FE接続失敗時のメモリ破損を修正 (#48370 #48313)
• lambda と配列関数でのメモリ破損を修正 (#49140)
• null文字列からJSONBへの変換によるBEコアを修正 (#49810)
• parse_url での未定義動作を標準化 (#49149)
• array_overlap のnull処理を修正 (#49403)
• 非ASCII文字の大文字小文字変換エラーを修正 (#49763)
• percentile 関数でのBEコアを修正 (#48563)
• 複数のメモリ破損問題を修正 (#48288 #49737 #48018 #47964)
• SET演算子の不正な結果を修正 (#48001)
• FD枯渇を防ぐためデフォルトArrow Flightスレッドプールサイズを削減 (#48530)
• ウィンドウ関数のメモリ破損を修正 (#48458)

半構造化データ管理

• チャンク化Stream Load JSON インポートを修正 (#48474)
• JSONBフォーマット検証を強化 (#48731)
• 大きなSTRUCTフィールドでのクラッシュを修正 (#49552)
• 複合型でのVARCHAR長サポートを拡張 (#48025)
• 特定パラメータでの array_avg クラッシュを修正 (#48691)
• VARIANT型での ColumnObject::pop_back クラッシュを修正 (#48935 #48978)
• VARIANT型でのインデックス構築を無効化 (#49844)
• VARIANT型での転置インデックスv1フォーマットを無効化 (#49890)
• VARIANT型での多層CASTエラーを修正 (#47954)
• 多数のサブカラムを持つVARIANTの転置インデックスメタデータ検索を最適化 (#48153)
• Storage-Compute SeparationモードでのVARIANTスキーマメモリ消費を削減 (#47629 #48463)
• PreparedStatement IDオーバーフローを修正 (#48116)
• DELETE操作での行ストレージを修正 (#49609)

転置インデックス

• ARRAY型のnullビットマップ処理を修正 (#48052)
• Date/Datetimev1 Bloomfilter比較を修正 (#47005)
• UTF-8 4バイト文字の切り詰めを修正 (#48792)
• カラム追加直後のインデックス喪失を修正 (#48547)
• ARRAY転置インデックスでの空データ処理を修正 (#48264)
• FEメタデータアップグレード互換性を改善 (#49283)
• match_phrase_prefix キャッシュエラーを修正 (#46517)
• compaction後のファイルキャッシュクリーンアップを修正 (#49738)

セキュリティ

• DELETE操作のSelect_Privチェックを削除 (#49239)
• 非rootユーザーによるroot権限変更を防止 (#48752)
• 断続的なLDAP PartialResultExceptionを修正 (#47858)

その他

• JAVA_OPTS_FOR_JDK_17認識を修正 (#48170)
• InterruptExceptionによるBDBメタデータ書き込み失敗を修正 (#47874)
• 複数文リクエストのSQLハッシュ生成を改善 (#48242)
• ユーザー属性変数がセッション変数をオーバーライドするよう修正 (#48548)