Databricks のデータをDataSpider Servista の連携先として使う方法

こんにちは！リードエンジニアの杉本です。

DataSpider Servista は、異なるシステムのデータやアプリケーションをノンプログラミングで「つなぐ」データインテグレーションプラットフォームです。

CData JDBC ドライバはDataSpider Servista において、JDBC データソースとして利用することが可能です。通常のJDBC の検索・更新などのアイコンを使って、標準SQL でSaaS/Web DB のデータを扱うことを可能にします。 この記事では、DataSpider で CData JDBC Driverを利用してDatabricks のデータに外部データとしてSQL でアクセスする方法を紹介します。

CData JDBC Driver for Databricks をDataSpider にコネクタとして登録

1. JDBC Driver をDataSpider と同じサーバーにインストール
2. DataSpider の外部JDBCドライバのパスにCData JDBC ドライバのcdata.jdbc.databricks.jar とcdata.jdbc.databricks.lic を配置
   DataSpider 側：DataSpiderServista\server\plugin\data_processing\modules\jdbc_adapter
   
3. グローバルリソースのプロパティで、ドライバクラス名およびURL を入力。
   
   • 接続名：任意
   • 種別：デフォルト
   • 接続タイプ：接続タイプ：JDBC（JDBC接続設定）
   • ドライバクラス名：cdata.jdbc.databricks.DatabricksDriver
   • URL：jdbc:databricks:Server=127.0.0.1;Port=443;TransportMode=HTTP;HTTPPath=MyHTTPPath;UseSSL=True;User=MyUser;Password=MyPassword;

4. Databricks クラスターに接続するには、以下の説明に従ってプロパティを設定します。

   Note：Databricks インスタンスで必要な値は、クラスターに移動して目的のクラスターを選択し、Advanced Options の下にあるJDBC/ODBC タブを選択することで見つけることができます。

   • Database：Databricks データベース名に設定。
   • Server：Databricks クラスターのサーバーのホスト名に設定。
   • HTTPPath：Databricks クラスターのHTTP パスに設定。
   • Token：個人用アクセストークンに設定（この値は、Databricks インスタンスのユーザー設定ページに移動してアクセストークンタブを選択することで取得できます）。

DataSpider でDatabricks のデータを連携利用する

あとは通常のRDB コンポーネントのように、Databricks のデータを扱うことが可能です。ツールパレットのJDBC からSQL 実行やストアドプロシージャ実行コンポーネントが使用できます。

例えばDatabricks のデータの取得であれば、検索系SQL実行処理を使って、SELECT 文でDatabricks のデータを抽出することができます。

このようにCData JDBC ドライバを使って、簡単にDataSpider でDatabricks のデータ データをノーコードで連携利用することができます。

CData JDBC Driver for Databricks 30日の無償評価版 をダウンロードして、お試しください。