ノーコードでクラウド上のデータとの連携を実現。
詳細はこちら →CData
こんにちは!ウェブ担当の加藤です。マーケ関連のデータ分析や整備もやっています。
PostgreSQL には多くの対応クライアントがあります。標準のドライバーからBI、アナリティクスツールまで、PostgreSQL はデータ接続の人気のインターフェースです。JDBC ドライバーを使用することで、簡単に任意の標準クライアントから接続できるPostgreSQL エントリポイントを作成できます。
Avro にPostgreSQL データベースとしてアクセスするには、CData JDBC Driver for Avro とJDBC foreign data wrapper (FDW) を使用します。この記事ではFDW をコンパイルしてインストールし、PostgreSQL サーバーからAvro にクエリを実行します。
JDBC データソースとしてAvro に接続するには、以下が必要です。
Driver クラス
cdata.jdbc.avro.AvroDriver
URI 接続プロパティをAvro ファイルの場所に設定して、ローカルのAvro ファイルに接続します。
JDBC URL の構成については、Avro JDBC Driver に組み込まれている接続文字列デザイナを使用できます。JAR ファイルのダブルクリック、またはコマンドラインからJAR ファイルを実行します。
java -jar cdata.jdbc.avro.jar
接続プロパティを入力し、接続文字列をクリップボードにコピーします。
以下は一般的なJDBC URL です。
jdbc:avro:URI=C:/folder/table.avroInitiateOAuth=GETANDREFRESH
FDW は、PostgreSQL を再コンパイルせずに、PostgreSQL の拡張機能としてインストールできます。例としてjdbc2_fdw 拡張子を使用します。
ln -s /usr/lib/jvm/java-6-openjdk/jre/lib/amd64/server/libjvm.so /usr/lib/libjvm.so
make install USE_PGXS=1
拡張機能をインストールした後、以下のステップに従ってAvro へのクエリの実行を開始します。
CREATE EXTENSION jdbc2_fdw;
CREATE SERVER Avro
FOREIGN DATA WRAPPER jdbc2_fdw OPTIONS (
drivername 'cdata.jdbc.avro.AvroDriver',
url 'jdbc:avro:URI=C:/folder/table.avroInitiateOAuth=GETANDREFRESH',
querytimeout '15',
jarfile '/home/MyUser/CData/CData\ JDBC\ Driver\ for\ Salesforce MyDriverEdition/lib/cdata.jdbc.avro.jar');
CREATE USER MAPPING for postgres SERVER Avro OPTIONS (
username 'admin',
password 'test');
postgres=# CREATE FOREIGN TABLE sampletable_1 (
sampletable_1_id text,
sampletable_1_Id text,
sampletable_1_Column1 numeric)
SERVER Avro OPTIONS (
table_name 'sampletable_1');
postgres=# SELECT * FROM sampletable_1;
このようにCData JDBC Driver for Avro を使って簡単にAvro データを取得して検索対象にすることができました。ぜひ、30日の無償評価版 をお試しください。