こんにちは！プロダクトスペシャリストの菅原です。
appsmith は、社内ツールの作成に特化したオープンソースのローコードツールです。ドラッグアンドドロップや簡単なコーディングを組み合わせてアプリを作成できます。さらにCData Connect Cloud と組み合わせることで、Databricks を含む150種類以上のデータソースをアプリに統合できます。
CData Connect Cloud とは？
CData Connect Cloud は、以下のような特徴を持ったクラウド型のリアルタイムデータ連携製品です。
- SaaS やクラウドデータベースを中心とする150種類以上のデータソース
- BI、アナリティクス、ETL、ローコードツールなど30種類以上のツールやアプリケーションから利用可能
- リアルタイムのデータ接続に対応。データの複製を作る必要はありません
- ノーコードでシンプルな設定
詳しくは、こちらの製品資料をご確認ください。
Connect Cloud アカウントの取得
以下のステップを実行するには、CData Connect Cloud のアカウントが必要になります。こちらから製品の詳しい情報とアカウント作成、30日間無償トライアルのご利用を開始できますので、ぜひご利用ください。
Databricks とのデータ連携について
Databricks のライブデータへのアクセスと統合は、CData を活用することでかつてないほど簡単になります。ユーザーは、CData のコネクティビティを利用して以下のことを実現しています。
- ランタイムバージョン 9.1 - 13.X 、およびPro またはClassic Databricks SQL バージョンに至るすべてのバージョンのDatabricks にアクセスできます。
- あらゆるホスティングソリューションと互換性があるため、Databricks を希望する環境で利用できます。
- 個人用アクセストークン、Azure サービスプリンシパル、Azure AD など、さまざまな方法でセキュアな認証を行います。
- Databricks ファイルシステム、Azure Blog Storage、AWS S3 Storage を使用してDatabricks にデータをアップロードします。
ユーザーの多くはCData のソリューションを使用して異なるシステムからDatabricks データレイクハウスにデータを移行していますが、CData のリアルタイム接続ソリューションを使ってデータベースとDatabricks 間の接続をフェデレートしているケースもあります。このようなケースでは、SQL Server のリンクサーバーやPolybase を使用して、既存のRDBM 内からDatabricks にリアルタイムアクセスしています。
Databricks の一般的な使用事例と、CData のソリューションがデータに関する問題の解決にどのように役立つのかについては、ブログをご覧ください：What is Databricks Used For? 6 Use Cases。
Connect Cloud からDatabricks への接続
CData Connect Cloud なら、直感的なクリック操作ベースのインターフェースを使ってデータソースに接続できます。サイドバーの「無償トライアル」ボタンから30日間の無償トライアルをスタートできます。
-
登録後、Connect Cloud にログインして Add Connection をクリックします。
![コネクションを追加]()
- Add Connection パネルで「Databricks」を選択します。
![データソースを選択]()
-
必要な認証プロパティを入力し、Databricks に接続します。
Databricks クラスターに接続するには、以下の説明に従ってプロパティを設定します。
Note：Databricks インスタンスで必要な値は、クラスターに移動して目的のクラスターを選択し、Advanced Options
の下にあるJDBC/ODBC タブを選択することで見つけることができます。
- Database：Databricks データベース名に設定。
- Server：Databricks クラスターのサーバーのホスト名に設定。
- HTTPPath：Databricks クラスターのHTTP パスに設定。
- Token：個人用アクセストークンに設定（この値は、Databricks
インスタンスのユーザー設定ページに移動してアクセストークンタブを選択することで取得できます）。
![コネクションを設定（Salesforce の場合）]()
-
Create & Test をクリックします。
-
Add Databricks Connection ページのPermissions タブに移動し、ユーザーベースのアクセス許可を更新します。
![アクセス許可の更新]()
パーソナルアクセストークンの取得
OAuth 認証をサポートしていないサービス、アプリケーション、プラットフォーム、またはフレームワークから接続する場合は、認証に使用するパーソナルアクセストークン（PAT）を作成できます。
きめ細かなアクセス管理を行うために、サービスごとに個別のPAT を作成するのがベストプラクティスです。
- Connect Cloud アプリの右上にあるユーザー名をクリックし、User Profile をクリックします。
-
User Profile ページでPersonal Access Token セクションにスクロールし、 Create PAT をクリックします。
-
PAT の名前を入力して Create をクリックします。
![新しいPAT を作成]()
- パーソナルアクセストークンは作成時にしか表示されないため、必ずコピーして安全に保存してください。
接続の設定が完了したら、appsmith からDatabricks のデータに接続できるようになります。
appsmith でのデータソース設定
それではappsmith の画面で、CData Connect Cloud の接続設定をしていきましょう。
- 画面の左側にある「Datasources」の「+」をクリックします。
![appsmith のデータソースを作成]()
-
appsmith から接続できるデータソースが表示されるので、「Microsoft SQL Server」を選択します。
![SQL Server データソースを選択]()
-
CData Connect Cloud のTDS エンドポイント、接続ユーザー、PAT（アクセストークン）を設定して、「TEST」をクリックして接続確認を行います。正常に接続できたら「SAVE」をクリックして保存します。
- Host Address：tds.cdata.com
- Port：14333
- Database Name：Connect Cloude で設定したデータソース名（Salesforce1 など）
- Username：Connect Cloud のユーザー名
- Password：上記で取得したPAT
![Connect Cloud データソースとの接続設定]()
appsmith でのクエリ実行
以上でデータソースへの接続設定が完了しました。次に、SQL クエリを追加して実際にデータソースからデータを取得してみましょう。
- 作成したデータソースの画面で、「NEW QUERY」をクリックします。
![NEW QUERY をクリック]()
- 今回はデータを取得したいので、「SELECT」を選択します。
![SELECT を選択]()
- SQL を指定する際には、CData Connect Cloud の機能である「Data Explorer」を使用することで、事前に取得したいデータを確認できます。必要に応じて利用してみてください。
![Connect Cloud のQuery Explorer でデータを確認]()
- 発行するクエリを作成したら、appsmith 画面に戻り、クエリを入力して「RUN」をクリックします。
- 無事にデータが取得できたら、あとはデータを使用したい「Page」に取得した「Table」を表示させるよう設定します。
![appsmith のテーブルに取得し多データを表示]()
- これで、appsmith からCData Connect Cloud と連携して、Databricks のデータを取得することができました！いつも利用している業務データを使って、簡単にアプリが作れちゃいますね。
おわりに
この記事ではローコードツールのappsmith からCData Connect Cloud に接続して、Databricks のデータを取得しました。CData Connect Cloud では、Databricks 以外の150種類以上のデータソースに同様の方法で連携可能です。30日間無償トライアル を利用して、appsmith からSaaS、ビッグデータ、NoSQL データソースへのSQL アクセスをお試しください！
