SQL Error
Q1. Query error: Failed to get scan range, no queryable replica found in tablet: xxxx
これは、対応するタブレットで照会可能なコピーが見つからないために発生します。通常、BEがダウンしている、コピーが欠損しているなどの原因によるものです。まずshow tablet tablet_id文を実行してから、以下のshow proc文を実行してこのタブレットに対応するレプリカ情報を確認し、レプリカが完全であるかをチェックできます。同時に、show proc "/cluster_balance"情報を通してクラスター内のレプリカスケジューリングと修復の進行状況を照会することもできます。
データコピー管理に関連するコマンドについては、Data Copy Managementを参照してください。
Q2. Show backends/frontends で確認される情報が不完全
show backends/frontendsなどの特定のステートメントを実行した後、結果の一部の列が不完全である場合があります。例えば、show backendsの結果でディスク容量情報が確認できないなどです。
通常、この問題はクラスターに複数のFEがある場合に発生します。ユーザーがMaster FE以外のFEノードに接続してこれらのステートメントを実行すると、不完全な情報が表示されます。これは、一部の情報がMaster FEノードにのみ存在するためです。例えば、BEのディスク使用量情報などです。そのため、Master FEに直接接続してから完全な情報を取得できます。
もちろん、ユーザーはこれらのステートメントを実行する前にset forward_to_master=true;を実行することもできます。セッション変数がtrueに設定された後、その後実行される一部の情報表示ステートメントは自動的にMaster FEに転送されて結果を取得します。この方法により、ユーザーがどのFEに接続していても完全な結果を取得できます。
Q3. invalid cluster id: xxxx
このエラーは、show backendsまたはshow frontendsコマンドの結果に表示される場合があります。通常、FEまたはBEノードのエラーメッセージ列に表示されます。このエラーの意味は、Master FEがノードにハートビート情報を送信した後、ノードがハートビート情報に含まれるcluster idがローカルに保存されているcluster idと異なることを検出し、ハートビートへの応答を拒否することです。
DorisのMaster FEノードは各FEまたはBEノードに対してアクティブにハートビートを送信し、ハートビート情報にcluster_idを含めます。cluster_idは、クラスターが初期化されるときにMaster FEによって生成される一意のクラスターIDです。FEまたはBEが初めてハートビート情報を受信すると、cluster_idはファイル形式でローカルに保存されます。FEのファイルはメタデータディレクトリのimage/ディレクトリにあり、BEは全てのデータディレクトリにcluster_idファイルがあります。その後、ノードがハートビートを受信するたびに、ローカルのcluster_idの内容とハートビート内の内容を比較します。一致しない場合、ハートビートへの応答を拒否します。
このメカニズムは、クラスター外のノードから送信される偽のハートビートメッセージの受信を防ぐためのノード認証メカニズムです。
このエラーから回復する必要がある場合、まず全てのノードが正しいクラスターにあることを確認する必要があります。その後、FEノードの場合、メタデータディレクトリのimage/VERSIONファイルのcluster_id値を変更してFEを再起動することを試すことができます。BEノードの場合、データディレクトリ内の全てのcluster_idファイルを削除してBEを再起動できます。
Q4. Unique Keyモデルのクエリ結果が一致しない
場合によっては、ユーザーがUnique Keyモデルのテーブルをクエリするために同じSQLを使用すると、複数のクエリの結果が一致しない場合があります。そして、クエリ結果は常に2-3種類の間で変化します。
これは、同じバッチのインポートデータで同じキーだが異なる値を持つデータが存在するために発生する可能性があります。これにより、データ上書きの順序の不確実性により、異なるレプリカ間で一致しない結果が生じます。
例えば、テーブルがk1, v1として定義されている場合、インポートデータのバッチは以下の通りです：
1, "abc"
1, "def"
その結果、copy 1の結果は1, "abc"で、copy 2の結果は1, "def"となる可能性があります。結果として、クエリ結果に一貫性がなくなります。
異なるレプリカ間でデータシーケンスが一意になることを保証するには、Sequence Column機能を参照してください。
Q5. bitmap/hll型データのクエリでNULLが返される問題
バージョン1.1.xで、ベクトル化が有効な場合、クエリデータテーブルのbitmap型フィールドがNULL結果を返すとき、
- 最初に
set return_object_data_as_binary=true;を実行する必要があります - ベクトル化を無効にします
set enable_vectorized_engine=false; - SQLキャッシュを無効にします
set [global] enable_sql_cache = false;
これは、bitmap / hll型がベクトル化実行エンジンにおいて、入力がすべてNULLの場合、出力結果も0ではなくNULLになるためです。
Q5. bitmap/hll型データのクエリでNULLが返される問題
バージョン1.1.xで、ベクトル化が有効な場合、クエリデータテーブルのbitmp型フィールドがNULL結果を返すとき、
- 最初に
set return_object_data_as_binary=true;を実行する必要があります - ベクトル化を無効にします
set enable_vectorized_engine=false; - SQLキャッシュを無効にします
set [global] enable_sql_cache = false;
これは、bitmap/hll型がベクトル化実行エンジンにおいて、入力がすべてNULLの場合、出力結果も0ではなくNULLになるためです。
Q6. オブジェクトストレージアクセス時のエラー: curl 77: Problem with the SSL CA cert
be.INFOログにcurl 77: Problem with the SSL CA certエラーが表示される場合は、以下の方法で解決を試すことができます：
- https://curl.se/docs/caextract.htmlで証明書をダウンロード: cacert.pem
- 証明書を指定された場所にコピー:
sudo cp /tmp/cacert.pem /etc/ssl/certs/ca-certificates.crt - BEノードを再起動します。
Q7. インポートエラー："Message": "[INTERNAL_ERROR]single replica load is disabled on BE."
- be.confのパラメータ
enable_single_replica_loadがtrueに設定されていることを確認してください - BEノードを再起動します。
