メインコンテンツまでスキップ

リリース 3.0.4

コミュニティメンバーの皆様、Apache Doris 3.0.4 バージョンが2025年2月2日に正式リリースされました。このバージョンでは、システムのパフォーマンスと安定性がさらに向上しています。

クイックダウンロード: https://doris.apache.org/download/

GitHub Release: https://github.com/apache/doris/releases

動作変更​

  • Auditログにて、drop tableおよびdrop database文に対してforceフラグが保持されるようになりました。#43227

  • Parquet/ORC形式にデータをエクスポートする際、bitmap、quantile_state、hllタイプはBinary形式でエクスポートされます。また、jsonbおよびvariantタイプのエクスポートサポートが追加され、これらはstringとしてエクスポートされます。#44041

  • External カタログ経由で大文字小文字を区別しないテーブル名を持つデータソース（Hiveなど）をクエリする際、以前のバージョンでは任意の大文字小文字でテーブル名をクエリできましたが、バージョン3.0.4では、Doris独自のテーブル名大文字小文字区別ポリシーが厳密に適用されます。

  • Hudi JNI ScannerがSpark APIからHadoop APIに置き換えられ、互換性が向上しました。ユーザーはセッション変数set hudi_jni_scanner=spark/hadoopを設定することで切り替えることができます。#44396

  • Colocateテーブルでのauto bucketの使用が禁止されました。#44396

  • カタログにPaimonキャッシュが追加され、リアルタイムデータクエリが排除されました。#44911

  • Broker Loadでの大規模データインポートのパフォーマンス向上のため、max_broker_concurrencyのデフォルト値が増加されました。#44929

  • Auto パーティションパーティションのstorage mediumのデフォルト値が、システムデフォルト値を使用する代わりに、現在のテーブルのstorage mediumの属性値に変更されました。#45955

  • Keyカラムに対するSchema Change実行中の列更新が禁止されました。#46347

  • 自動増分列を含むKeyカラムに対して、自動増分列を提供せずに列更新を許可するサポートが追加されました。#44528

  • FE ID生成戦略が時間ベースのアプローチに切り替えられ、IDは10000から開始されなくなりました。#44790

  • コンピューティング・ストレージ分離モードにおいて、Compactionのデフォルトのstale rowsetリサイクル遅延が1800秒に短縮され、リサイクル間隔が短縮されました。これにより極端なシナリオで大きなクエリが失敗する可能性があり、必要に応じて調整が可能です。#45460

  • show cache hotspot文がコンピューティング・ストレージ分離モードで無効化され、システムテーブルへの直接アクセスが必要になりました。#47332

  • システムが作成したadminユーザーの削除が禁止されました。#44751

改善​

ストレージ​

  • 小さなmax_match_interval設定によりRoutine Loadタスクが頻繁にタイムアウトする問題を最適化しました。#46292
  • 複数の圧縮ファイルをインポートする際のBroker Loadのパフォーマンスを改善しました。#43975
  • Stream Loadのパフォーマンス向上のため、webserver_num_workersのデフォルト値を増加しました。#46593
  • BEノードスケーリング時のRoutine Loadインポートタスクの負荷不均衡問題を最適化しました。#44798
  • Routine Loadスレッドプールの使用を改善し、タイムアウトがクエリに影響することを防ぎました。#45039

コンピューティング・ストレージ分離​

  • Meta-serviceの安定性と可観測性を向上させました。#44036, #45617, #45255, #45068
  • 早期退避戦略の追加、ロック時間の短縮、クエリパフォーマンスの向上により、File Cacheを最適化しました。#47473, #45678, #47472
  • 安定性向上のため、File Cacheの初期化チェックとキュー遷移を改善しました。#44004, #44429, #45057, #47229
  • HDFSデータリサイクルの速度を向上させました。#46393
  • 超高頻度インポート時のFEがcompute groupを取得する際のパフォーマンス問題を最適化しました。#47203
  • コンピューティング・ストレージ分離におけるprimary keyテーブルのインポート関連パラメータを複数改善し、リアルタイム高並行インポートの安定性を向上させました。#47295, #46750, #46365

レイクハウス​

  • JSON形式のHiveテーブルの読み取りをサポートしました。#43469

  • CSV形式のUTF-8エンコーディングチェックをスキップするセッション変数enable_text_validate_utf8を導入しました。#45537

  • Hudiバージョンを0.15に更新し、Hudiテーブルのクエリ計画パフォーマンスを最適化しました。

  • MaxComputeパーティションテーブルの読み取りパフォーマンスを改善しました。#45148

  • 高フィルタ率でのParquetファイル遅延マテリアライゼーションのパフォーマンスを最適化しました。#46183

  • 複雑なParquetタイプの遅延マテリアライゼーションをサポートしました。#44098

  • ORCタイプの述語プッシュダウンロジックを最適化し、インデックスフィルタリングのためのより多くの述語条件をサポートしました。#43255

非同期マテリアライズドビュー​

  • 集約ロールアップ書き換えのより多くのシナリオをサポートしました。#44412

クエリオプティマイザ​

  • パーティションプルーニングパフォーマンスを改善しました。#46261
  • データ特性に基づいてgroup byキーを排除するルールを追加しました。#43391
  • ターゲットテーブルサイズに基づいてRuntime Filtersの待機時間を適応的に調整しました。#42640
  • より多くのシナリオに適合するよう、結合での集約プッシュダウン機能を改善しました。#43856, #43380
  • より多くのシナリオに適合するよう、集約のLimitプッシュダウンを改善しました。#44042

その他​

  • FE、BE、MSプロセスの起動スクリプトを最適化し、より明確な出力を提供しました。#45610, #45490, #45883
  • show tablesのテーブル名の大文字小文字の区別がMySQLの動作と一致するようになりました。#46030
  • show indexが任意のターゲットテーブルタイプをサポートするようになりました。#45861
  • information_schema.columnsがデフォルト値の表示をサポートするようになりました。#44849
  • information_schema.viewsがビュー定義の表示をサポートするようになりました。#45857
  • MySQLプロトコルCOM_RESET_CONNECTIONコマンドをサポートしました。#44747

バグ修正​

ストレージ​

  • 集約テーブルモデルのインポートプロセス中の潜在的なメモリエラーを修正しました。#46997
  • コンピューティング・ストレージ分離モードでのFEマスターノード再起動時のRoutine Loadオフセット損失問題を解決しました。#46566
  • コンピューティング・ストレージモードでのバッチインポートシナリオにおけるFE Observerノードのメモリリークを修正しました。#47244
  • Order Data CompactionでのFull Compaction中のCumulative Pointロールバック問題を解決しました。#44359
  • Delete操作がTablet Compactionスケジューリングを一時的に妨げる問題を修正しました。#43466
  • マルチコンピューティングクラスターシナリオでのSchema Change後の不正なTablet状態を解決しました。#45821
  • sequence_typeを持つprimary keyテーブルでColumn Rename Schema Changeを実行する際の潜在的なNPEエラーを修正しました。#46906
  • データ正確性: DELETE SIGN列を含む部分列更新をインポートする際のprimary keyテーブルの正確性問題を修正しました。#46194
  • primary keyテーブルのPublishタスクが継続的にスタックした際のFEの潜在的なメモリリークを解決しました。#44846

コンピューティング・ストレージ分離​

  • File Cacheサイズがテーブルデータサイズを超える問題を修正しました。#46561, #46390
  • データアップロード時の5MB境界でのアップロード失敗を解決しました。#47333
  • Storage Vaultでの複数のalter操作に対するパラメータチェックを追加し、堅牢性を向上させました。#45155, #45156, #46625, #47078, #45685, #46779
  • 不適切なStorage Vault設定によるデータリサイクル失敗または低速リサイクル問題を解決しました。#46798, #47536, #47475, #47324, #45072
  • データリサイクルが停止し、適時にリサイクルされない問題を修正しました。#45760
  • コンピューティング・ストレージ分離モードでのMTTM-230エラーの不正な再試行を解決しました。#47370, #47326
  • コンピューティング・ストレージ分離モードでのBE廃止時にGroup Commit WALが完全に再生されない問題を修正しました。#47187
  • Tablet Metaが2GBを超えるとMSが利用不可になる問題を解決しました。#44780
  • データ正確性: コンピューティング・ストレージ分離モードでのprimary keyテーブルの2つの重複Key問題を修正しました。#46039, #44975
  • 高頻度リアルタイムインポート中のprimary keyテーブルで大きなDelete Bitmapが原因でBase Compactionが継続的に失敗する問題を解決しました。#46969
  • コンピューティング・ストレージ分離モードでのprimary keyテーブルのSchema Changeの不正な再試行ロジックを修正し、堅牢性を向上させました。#46748

レイクハウス​

Hive​

  • Sparkによって作成されたHiveビューがクエリできない問題を修正しました。#43553
  • 特定のHive Transactionテーブルが正しく読み取れない問題を解決しました。#45753
  • パーティションに特殊文字を含むHiveテーブルでパーティションプルーニングが失敗する問題を修正しました。#42906

Iceberg​

  • Kerberos認証環境でIcebergテーブルが作成できない問題を修正しました。#43445
  • dangling deleteを持つIcebergテーブルでcount(*)クエリが不正確になる問題を解決しました。#44039
  • Icebergテーブルでの列名不一致によるクエリエラーを修正しました。#44470
  • パーティション変更後にIcebergテーブルが読み取れない問題を解決しました。#45367

Paimon​

  • Paimon カタログがAlibaba Cloud OSS-HDFSにアクセスできない問題を修正しました。#42585

Hudi​

  • 特定のシナリオでHudiテーブルのパーティションプルーニングが失敗する問題を修正しました。#44669

JDBC​

  • 大文字小文字を区別しないテーブル名を有効にした後、JDBC カタログを使用してテーブルが取得できない問題を修正しました。

MaxCompute​

  • 特定のシナリオでMaxComputeテーブルのパーティションプルーニングが失敗する問題を修正しました。#44508

その他​

  • エクスポートタスクがFEでメモリリークを引き起こす問題を修正しました。#44019
  • HTTPSプロトコル経由でS3オブジェクトストレージにアクセスできない問題を解決しました。#44242
  • Kerberos認証チケットが自動更新されない問題を修正しました。#44916
  • Hadoop Block圧縮形式ファイルの読み取りが失敗する問題を解決しました。#45289
  • ORC形式データをクエリする際、潜在的な結果エラーを回避するため、CHARタイプの述語はプッシュダウンされなくなりました。#45484

非同期マテリアライズドビュー​

  • 極端なシナリオで透過的クエリ書き換えが計画または結果エラーを引き起こす問題を修正しました。#44575, #45744
  • 極端なシナリオで非同期マテリアライズドビューのスケジューリング中に複数のビルドタスクが生成される問題を解決しました。#46020, #46280

クエリオプティマイザ​

  • 一部の式書き換えが不正な式を生成する問題を修正しました。#44770, #44920, #45922, #45596
  • SQL Cacheから時折不正な結果が返される問題を解決しました。#44782, #44631, #46443, #47266
  • 一部のシナリオで集約オペレータのlimitプッシュダウンが不正な結果を生成する問題を修正しました。#45369
  • 一部のシナリオで遅延マテリアライゼーション最適化が不正な実行計画を生成する問題を解決しました。#45693, #46551

クエリ実行​

  • 特殊文字で正規表現とlike関数が不正な結果を生成する問題を修正しました。#44547
  • データベース切り替え時にSQL Cache結果が不正になる問題を解決しました。#44782
  • Arrow Flight関連の一連の問題を修正しました。#45023, #43929
  • 一部のケースでHashJoinのHashテーブルが4GBを超える際に結果が不正になる問題を解決しました。#46461
  • 中国語文字でのconvert_to関数のオーバーフロー問題を修正しました。#46405
  • group byとLimitを使用する極端なシナリオで結果が不正になる問題を解決しました。#47844
  • 特定のシステムテーブルにアクセスする際に結果が不正になる問題を修正しました。#47498
  • percentile関数がシステムクラッシュを引き起こす問題を解決しました。#47068
  • Limitのあるシングルテーブルクエリのパフォーマンス劣化問題を修正しました。#46090
  • StDistanceSphereおよびStAngleSphere関数がシステムクラッシュを引き起こす問題を解決しました。#45508
  • map_aggの結果が不正な問題を修正しました。#40454

半構造化データ管理​

BloomFilter Index​

  • BloomFilter Indexの大きなパラメータによる例外を修正しました。#45780
  • BloomFilter Index書き込み時の高メモリ使用量問題を解決しました。#45833
  • 列が削除された際にBloomFilter Indexが正しく削除されない問題を修正しました。#44361, #43378

Inverted Index​

  • インバーテッドインデックス構築時の時折発生するクラッシュを修正しました。#43246
  • インバーテッドインデックスマージ時にゼロ出現回数の単語が容量を占有する問題を解決しました。#43113
  • Index Size統計での異常な大きな値を防止しました。#46549
  • VARIANTタイプフィールドのインバーテッドインデックス問題を修正しました。#43375
  • インバーテッドインデックスのローカルキャッシュの局所性を最適化し、キャッシュヒット率を向上させました。#46518
  • インバーテッドインデックスのリモートストレージ読み取りのため、クエリプロファイルにメトリックNumInvertedIndexRemoteIOTotalを追加しました。#45675, #44863

その他​

  • 特殊なNULLデータでのipv6_cidr_to_range関数のクラッシュ問題を修正しました。#44700

権限​

  • CREATE_PRIVを付与する際に、対応するリソースの存在がチェックされなくなりました。#45125
  • 極端なシナリオで権限を持つビューのクエリが参照テーブルの権限不足により失敗する問題を修正しました。#44621
  • use dbの権限チェックで内部および外部カタログが区別されない問題を解決しました。#45720
Report issue
ASF
Resources
Community
Join the community
Copyright © 2026 The Apache Software Foundation,Licensed under the Apache License, Version 2.0. Apache, Doris, Apache Doris, the Apache feather logo and the Apache Doris logo are trademarks of The Apache Software Foundation.