PostgreSQL JDBCカタログ

Doris JDBC Catalog は標準のJDBCインターフェースを介してPostgreSQLデータベースへの接続をサポートします。この文書では、PostgreSQLデータベース接続の設定方法について説明します。

JDBC Catalogの概要については、以下を参照してください: JDBC Catalog Overview

使用上の注意

PostgreSQLデータベースに接続するには、以下が必要です

• PostgreSQL 11.x以降

• PostgreSQLデータベース用のJDBCドライバ。最新版または指定されたバージョンをMaven Repositoryからダウンロードできます。PostgreSQL JDBC Driverバージョン42.5.x以降の使用を推奨します。

• Dorisの各FEおよびBEノードとPostgreSQLサーバー間のネットワーク接続。デフォルトポートは5432です。

PostgreSQLへの接続

CREATE CATALOG postgresql_catalog PROPERTIES (
    'type' = 'jdbc',
    'user' = 'username',
    'password' = 'pwd',
    'jdbc_url' = 'jdbc:postgresql://host:5432/postgres',
    'driver_url' = 'postgresql-42.5.6.jar',
    'driver_class' = 'org.postgresql.Driver'
);

jdbc_urlはPostgreSQL JDBCドライバーに渡される接続情報とパラメータを定義します。サポートされているURLパラメータはPostgreSQL JDBC Driver Documentationで確認できます。

接続セキュリティ

データソースにグローバルに信頼された証明書がインストールされたTLSを設定している場合、jdbc_urlプロパティで設定されるJDBC接続文字列にパラメータを追加することで、クラスターとデータソース間でTLSを有効にできます。

例えば、PostgreSQL JDBCドライバーのバージョン42では、jdbc_url設定プロパティにssl=trueパラメータを追加してTLSを有効にします：

"jdbc_url"="jdbc:postgresql://example.net:5432/database?ssl=true"

TLS設定オプションの詳細については、PostgreSQL JDBC Driver Documentationを参照してください。

階層マッピング

PostgreSQLをマッピングする際、DorisのDatabaseは、PostgreSQLの指定されたデータベース下のSchemaに対応します（例のpostgres下のjdbc_urlパラメータのように）。DorisのDatabase下のTableは、PostgreSQLのそのSchema下のTablesに対応します。マッピング関係は以下の通りです：

Doris	PostgreSQL
Catalog	Database
Database	Schema
Table	Table

カラム型マッピング

PostgreSQL Type	Doris Type
boolean	boolean
smallint/int2	smallint
integer/int4	int
bigint/int8	bigint
decimal/numeric	decimal(P, S) / string	精度なしのNumericはstring型にマッピングされ、数値計算にはdecimal型への変換が必要で、書き戻しはサポートされません。
real/float4	float
double	double
smallserial	smallint
serial	int
bigserial	bigint
char(N)	char(N)
varchar/text	string
timestamp(S)	datetime(S)
timestamptz(S)	datetime(S) / timestamptz(S)	enable.mapping.timestamp_tzプロパティによって制御されます（バージョン4.0.3以降でサポート）。デフォルトはfalseで、この場合はdatetimeにマッピングされます。trueに設定すると、timestamptz型にマッピングされます。
date	date
json/jsonb	string	より良い読み取りと計算性能のバランスのため、DorisはJSON型をSTRING型にマッピングします。
time	string	Dorisはtime型をサポートしていないため、time型はstringにマッピングされます。
interval	string
point/line/lseg/box/path/polygon/circle	string
cidr/inet/macaddr	string
uuid	string
bit	boolean / string	Dorisはbit型をサポートしていないため、bit型はbit(1)の場合はbooleanに、それ以外の場合はstringにマッピングされます。
bytea	varbinary	Catalogのenable.mapping.varbinaryプロパティによって制御されます（4.0.2以降でサポート）。デフォルトはfalseで、stringにマッピングされます。trueの場合は、varbinary型にマッピングされます。
array	array	array型のマッピング方法については、以下の説明を参照してください。
other	UNSUPPORTED

• Array型

  PostgreSQLでは、array型は以下のように定義できます：

  col1 text[]
  col2 in4[][]

ただし、配列の次元はPostgreSQLのメタデータから直接取得することができません。例えば、text[]は一次元配列または二次元配列である可能性があります。配列の次元は、データが書き込まれた後でのみ決定できます。

Dorisでは配列の次元を明示的に宣言する必要があります。そのため、PostgreSQLの対応する配列列にデータが含まれている場合のみDorisは正しくマッピングできます。そうでなければ、配列列は`UNSUPPORTED`としてマッピングされます。

付録

タイムゾーンの問題

Dorisはタイムゾーン付きのtimestamp型をサポートしていないため、PostgreSQLからtimestampz型を読み取る際、Dorisはそれをdatetime型にマッピングし、読み取り時にローカルタイムゾーン時刻に変換します。

また、JDBC型のCatalogからデータを読み取る際、BEのJava部分はJVMタイムゾーンを使用します。JVMタイムゾーンはデフォルトでBEのデプロイマシンのタイムゾーンに設定されており、これがJDBCがデータを読み取る際のタイムゾーン変換に影響します。

タイムゾーンの整合性を確保するために、be.confのJAVA_OPTSでJVMタイムゾーンを設定し、Dorisセッションのtime_zoneと一致させることを推奨します。