メインコンテンツまでスキップ

リリース 3.0.4

コミュニティメンバーの皆様へ、Apache Doris 3.0.4版が2025年2月2日に正式リリースされました。このバージョンでは、システムのパフォーマンスと安定性がさらに向上しています。

クイックダウンロード: https://doris.apache.org/download/

GitHub Release: https://github.com/apache/doris/releases

動作変更​

  • Auditログにて、drop tableおよびdrop database文のforceフラグが保持されるようになりました。#43227

  • Parquet/ORC形式にデータをエクスポートする際、bitmap、quantile_state、hllタイプはBinary形式でエクスポートされます。また、jsonbおよびvariantタイプのエクスポートサポートが追加され、これらはstringとしてエクスポートされます。#44041

  • External カタログでHiveなどの大文字小文字を区別しないテーブル名を持つデータソースをクエリする際、以前のバージョンでは任意の大文字小文字でテーブル名をクエリできましたが、バージョン3.0.4では、Doris自身のテーブル名大文字小文字区別ポリシーが厳密に従われます。

  • Hudi JNI ScannerがSpark APIからHadoop APIに置き換えられ、互換性が向上しました。ユーザーはセッション変数set hudi_jni_scanner=spark/hadoopで切り替えることができます。#44396

  • ColocateテーブルでのAuto bucketの使用が禁止されました。#44396

  • Paimonキャッシュがカタログに追加され、リアルタイムデータクエリが排除されました。#44911

  • max_broker_concurrencyのデフォルト値が増加し、Broker Loadでの大規模データインポートのパフォーマンスが向上しました。#44929

  • Auto パーティションパーティションのstorage mediumのデフォルト値が、システムのデフォルト値を使用するのではなく、現在のテーブルのstorage medium属性値に変更されました。#45955

  • Keyカラムに対してSchema Change実行中のカラム更新が禁止されました。#46347

  • 自動増分カラムを含むKeyカラムに対して、自動増分カラムを提供せずにカラム更新を許可するサポートが追加されました。#44528

  • FE IDジェネレータ戦略が時刻ベースアプローチに切り替えられ、IDは10000から開始されなくなりました。#44790

  • コンピュート・ストレージ分離モードにおいて、Compactionのデフォルトstale rowsetリサイクル遅延が1800秒に短縮され、リサイクル間隔が削減されました。これにより極端なシナリオで大規模クエリが失敗する可能性があり、必要に応じて調整できます。#45460

  • show cache hotspot文がコンピュート・ストレージ分離モードで無効化され、システムテーブルへの直接アクセスが必要になりました。#47332

  • システム作成のadminユーザーの削除が禁止されました。#44751

改善事項​

ストレージ​

  • 小さなmax_match_interval設定によりRoutine Loadタスクが頻繁にタイムアウトする問題が最適化されました。#46292
  • 複数の圧縮ファイルをインポートする際のBroker Loadパフォーマンスが改善されました。#43975
  • webserver_num_workersのデフォルト値が増加し、Stream Loadパフォーマンスが向上しました。#46593
  • BEノードスケーリング時のRoutine Loadインポートタスクの負荷不均衡問題が最適化されました。#44798
  • Routine Loadスレッドプールの使用が改善され、タイムアウトがクエリに影響するのを防止します。#45039

コンピュート・ストレージ分離​

  • Meta-serviceの安定性と可観測性が強化されました。#44036, #45617, #45255, #45068
  • File Cacheが最適化され、早期追い出し戦略の追加、ロック時間の短縮、クエリパフォーマンスの向上が実現されました。#47473, #45678, #47472
  • File Cacheの初期化チェックとキュー遷移が改善され、安定性が向上しました。#44004, #44429, #45057, #47229
  • HDFSデータリサイクルの速度が向上しました。#46393
  • 超高頻度インポート時のFEがコンピュートグループを取得する際のパフォーマンス問題が最適化されました。#47203
  • コンピュート・ストレージ分離におけるプライマリキーテーブルのインポート関連パラメータが複数改善され、リアルタイム高同時実行インポートの安定性が向上しました。#47295, #46750, #46365

レイクハウス​

  • JSON形式のHiveテーブル読み取りがサポートされました。#43469

  • CSV形式のUTF-8エンコーディングチェックをスキップするセッション変数enable_text_validate_utf8が導入されました。#45537

  • Hudiバージョンが0.15に更新され、Hudiテーブルのクエリ計画パフォーマンスが最適化されました。

  • MaxComputeパーティションテーブルの読み取りパフォーマンスが改善されました。#45148

  • 高フィルタ率下でのParquetファイル遅延マテリアライゼーションのパフォーマンスが最適化されました。#46183

  • 複合Parquetタイプの遅延マテリアライゼーションがサポートされました。#44098

  • ORCタイプの述語プッシュダウンロジックが最適化され、インデックスフィルタリングでより多くの述語条件がサポートされました。#43255

非同期マテリアライズドビュー​

  • 集約ロールアップ書き換えのシナリオがより多くサポートされました。#44412

クエリオプティマイザ​

  • パーティションプルーニングパフォーマンスが改善されました。#46261
  • データ特性に基づいてgroup byキーを除去するルールが追加されました。#43391
  • ターゲットテーブルサイズに基づいてRuntime Filtersの待機時間を適応的に調整するようになりました。#42640
  • Joinでの集約プッシュダウン能力が改善され、より多くのシナリオに適用されます。#43856, #43380
  • 集約のLimitプッシュダウンが改善され、より多くのシナリオに適用されます。#44042

その他​

  • FE、BE、MSプロセスの起動スクリプトが最適化され、より明確な出力が提供されます。#45610, #45490, #45883
  • show tablesでのテーブル名の大文字小文字区別がMySQLの動作に合致するようになりました。#46030
  • show indexが任意のターゲットテーブルタイプをサポートするようになりました。#45861
  • information_schema.columnsでデフォルト値の表示がサポートされました。#44849
  • information_schema.viewsでビュー定義の表示がサポートされました。#45857
  • MySQLプロトコルCOM_RESET_CONNECTIONコマンドがサポートされました。#44747

バグ修正​

ストレージ​

  • 集約テーブルモデルのインポートプロセス中の潜在的なメモリエラーが修正されました。#46997
  • コンピュート・ストレージ分離モードでのFEマスターノード再起動時のRoutine Loadオフセット損失問題が解決されました。#46566
  • コンピュート・ストレージモードのバッチインポートシナリオでのFE Observerノードのメモリリークが修正されました。#47244
  • Order Data CompactionでのFull Compaction中のCumulative Pointロールバック問題が解決されました。#44359
  • Delete操作がTablet Compactionスケジューリングを一時的に阻害する問題が修正されました。#43466
  • マルチコンピュートクラスターシナリオでのSchema Change後の不正なTablet状態が解決されました。#45821
  • sequence_typeを持つプライマリキーテーブルでColumn Rename Schema Changeを実行する際の潜在的なNPEエラーが修正されました。#46906
  • データ正確性: DELETE SIGNカラムを含む部分カラム更新をインポートする際のプライマリキーテーブルの正確性問題が修正されました。#46194
  • プライマリキーテーブルのPublishタスクが継続的にスタックした際のFEの潜在的なメモリリークが解決されました。#44846

コンピュート・ストレージ分離​

  • File Cacheサイズがテーブルデータサイズを超える問題が修正されました。#46561, #46390
  • データアップロード時の5MB境界でのアップロード失敗が解決されました。#47333
  • Storage Vaultでの複数のalter操作に対するパラメータチェックを追加し、堅牢性が強化されました。#45155, #45156, #46625, #47078, #45685, #46779
  • 不適切なStorage Vault設定によるデータリサイクル失敗または低速リサイクル問題が解決されました。#46798, #47536, #47475, #47324, #45072
  • データリサイクルが停止し、適時にリサイクルされない問題が修正されました。#45760
  • コンピュート・ストレージ分離モードでのMTTM-230エラーの不正なリトライが解決されました。#47370, #47326
  • コンピュート・ストレージ分離モードでのBE廃止時にGroup Commit WALが完全に再生されない問題が修正されました。#47187
  • Tablet Metaが2GBを超えてMSが使用不可になる問題が解決されました。#44780
  • データ正確性: コンピュート・ストレージ分離モードのプライマリキーテーブルでの2つの重複Key問題が修正されました。#46039, #44975
  • 高頻度リアルタイムインポート時の大きなDelete BitmapによりプライマリキーテーブルのBase Compactionが継続的に失敗する問題が解決されました。#46969
  • コンピュート・ストレージ分離モードでのプライマリキーテーブルのSchema Changeの不正なリトライロジックが修正され、堅牢性が強化されました。#46748

レイクハウス​

Hive​

  • Sparkで作成されたHiveビューがクエリできない問題が修正されました。#43553
  • 特定のHive Transactionテーブルが正しく読み取れない問題が解決されました。#45753
  • パーティションに特殊文字があるHiveテーブルでパーティションプルーニングが失敗する問題が修正されました。#42906

Iceberg​

  • Kerberos認証環境でIcebergテーブルが作成できない問題が修正されました。#43445
  • dangling deletesがあるIcebergテーブルでcount(*)クエリが不正確になる問題が解決されました。#44039
  • Icebergテーブルでカラム名の不一致によりクエリエラーが発生する問題が修正されました。#44470
  • パーティション変更後にIcebergテーブルが読み取れない問題が解決されました。#45367

Paimon​

  • Paimon カタログがAlibaba Cloud OSS-HDFSにアクセスできない問題が修正されました。#42585

Hudi​

  • 特定のシナリオでHudiテーブルのパーティションプルーニングが失敗する問題が修正されました。#44669

JDBC​

  • 大文字小文字を区別しないテーブル名を有効にした後、JDBC カタログでテーブルが取得できない問題が修正されました。

MaxCompute​

  • 特定のシナリオでMaxComputeテーブルのパーティションプルーニングが失敗する問題が修正されました。#44508

その他​

  • エクスポートタスクがFEでメモリリークを引き起こす問題が修正されました。#44019
  • S3オブジェクトストレージがHTTPSプロトコル経由でアクセスできない問題が解決されました。#44242
  • Kerberos認証チケットが自動更新されない問題が修正されました。#44916
  • Hadoop Block圧縮形式ファイルの読み取りが失敗する問題が解決されました。#45289
  • ORC形式データをクエリする際、潜在的な結果エラーを避けるためCHARタイプの述語がプッシュダウンされなくなりました。#45484

非同期マテリアライズドビュー​

  • 極端なシナリオで透過的クエリリライトが計画や結果エラーを引き起こす問題が修正されました。#44575, #45744
  • 極端なシナリオで非同期マテリアライズドビュースケジューリング中に複数のビルドタスクが生成される問題が解決されました。#46020, #46280

クエリオプティマイザ​

  • 一部の式書き換えが不正な式を生成する問題が修正されました。#44770, #44920, #45922, #45596
  • SQL Cacheの時折不正な結果が解決されました。#44782, #44631, #46443, #47266
  • 集約演算子のlimitプッシュダウンが一部のシナリオで不正な結果を生成する問題が修正されました。#45369
  • 遅延マテリアライゼーション最適化が一部のシナリオで不正な実行計画を生成する問題が解決されました。#45693, #46551

クエリ実行​

  • 正規表現とlike関数が特殊文字で不正な結果を生成する問題が修正されました。#44547
  • データベース切り替え時にSQL Cache結果が不正になる問題が解決されました。#44782
  • Arrow Flight関連の一連の問題が修正されました。#45023, #43929
  • HashJoinのHashテーブルが4GBを超える場合に結果が不正になる問題が解決されました。#46461
  • 中国語文字でのconvert_to関数のオーバーフロー問題が修正されました。#46405
  • group byをLimitと併用する極端なシナリオで結果が不正になる問題が解決されました。#47844
  • 特定のシステムテーブルにアクセスする際に結果が不正になる問題が修正されました。#47498
  • percentile関数がシステムクラッシュを引き起こす問題が解決されました。#47068
  • Limitつきシングルテーブルクエリのパフォーマンス劣化問題が修正されました。#46090
  • StDistanceSphereおよびStAngleSphere関数がシステムクラッシュを引き起こす問題が解決されました。#45508
  • map_agg結果が不正な問題が修正されました。#40454

半構造化データ管理​

BloomFilter Index​

  • BloomFilter Indexの大きなパラメータによる例外が修正されました。#45780
  • BloomFilter Index書き込み時の高メモリ使用量問題が解決されました。#45833
  • カラム削除時にBloomFilter Indexが正しく削除されない問題が修正されました。#44361, #43378

Inverted Index​

  • Inverted Index構築中の時折のクラッシュが修正されました。#43246
  • Inverted Indexマージ中にゼロ出現の単語が容量を占める問題が解決されました。#43113
  • Index Size統計での異常に大きな値が防止されました。#46549
  • VARIANTタイプフィールドのInverted Index問題が修正されました。#43375
  • Inverted Indexのローカルキャッシュ局所性が最適化され、キャッシュヒット率が向上しました。#46518
  • Inverted Indexのリモートストレージ読み取り用にメトリクスNumInvertedIndexRemoteIOTotalがクエリプロファイルに追加されました。#45675, #44863

その他​

  • 特殊なNULLデータでのipv6_cidr_to_range関数のクラッシュ問題が修正されました。#44700

権限​

  • CREATE_PRIV付与時に対応リソースの存在チェックが行われなくなりました。#45125
  • 権限のあるビューでのクエリが、極端なシナリオで参照テーブルの権限不足により失敗する問題が修正されました。#44621
  • use dbの権限チェックが内部と外部カタログを区別しない問題が解決されました。#45720
Report issue
ASF
Resources
Community
Join the community
Copyright © 2026 The Apache Software Foundation,Licensed under the Apache License, Version 2.0. Apache, Doris, Apache Doris, the Apache feather logo and the Apache Doris logo are trademarks of The Apache Software Foundation.