各製品の資料を入手。
詳細はこちら →Databricks Data Provider の30日間無償トライアルをダウンロード
30日間の無償トライアルへ
CData
こんにちは！リードエンジニアの杉本です。
Blazor は、.NET を使って対話型のクライアント側Web UI を構築するためのフレームワークです。JavaScript の代わりにC# を使って、UI を作れるところが魅力です。また、既存の.NET ライブラリや.NET エコシステムを使うことができる利点があります。
CData ADO.NET Provider for Databricks は、LINQ やEntity Framework などの標準のADO.NET インターフェースを使ってDatabricks を操作可能にします。Blazor が.NET Core 対応をしているため、Server Side Blazor からADO.NET Provider を使うことができます。この記事では、Server Side Blazor からDatabricks に接続して直接SQL クエリを実行する方法を説明します。
Databricks のライブデータへのアクセスと統合は、CData を活用することでかつてないほど簡単になります。ユーザーは、CData のコネクティビティを利用して以下のことを実現しています。
ユーザーの多くはCData のソリューションを使用して異なるシステムからDatabricks データレイクハウスにデータを移行していますが、CData のリアルタイム接続ソリューションを使ってデータベースとDatabricks 間の接続をフェデレートしているケースもあります。このようなケースでは、SQL Server のリンクサーバーやPolybase を使用して、既存のRDBM 内からDatabricks にリアルタイムアクセスしています。
Databricks の一般的な使用事例と、CData のソリューションがデータに関する問題の解決にどのように役立つのかについては、ブログをご覧ください：What is Databricks Used For? 6 Use Cases。
CData ADO.NET Provider は、通常であればRDB に接続するフレームワークである ADO.NET DataAdapter やLinqToSQL（もしくはDapper などのORM を挟んでもいいです）であり、Databricks のデータへもRDB と同感覚でアクセスが可能になります。
CData のWebsite からProvider をダウンロードして、マシンにインストールします。NuGet からインストールすることも可能です。Databricks ADO.NET Data Provider で検索してください。
サンプルプロジェクトの「Page」→「Index.razor」を開きます。
以下のコードを書きます。使っているクエリはおなじみの標準SQL です。Databricks 固有のAPI を書かなくてもRDB と同感覚でSQL が書けるところがADO.NET Prover for Databricks の強味です。
@page "/"
@using System.Data;
@using System.Data.CData.Databricks;
Hello, world!
Welcome to your Data app.
@using (DatabricksConnection connection = new DatabricksConnection(
"Server=127.0.0.1;Port=443;TransportMode=HTTP;HTTPPath=MyHTTPPath;UseSSL=True;User=MyUser;Password=MyPassword;"))
{
var sql = "SELECT City, CompanyName FROM Customers WHERE Country = 'US'";
var results = new DataTable();
DatabricksDataAdapter dataAdapter = new DatabricksDataAdapter(sql, connection);
dataAdapter.Fill(results);
}
@foreach (DataColumn item in results.Rows[0].Table.Columns)
{
@foreach (DataRow row in results.Rows)
{
@item.ColumnName
}
@foreach (var column in row.ItemArray)
{
}
@column.ToString()
}
Databricks クラスターに接続するには、以下の説明に従ってプロパティを設定します。
Note：Databricks インスタンスで必要な値は、クラスターに移動して目的のクラスターを選択し、Advanced Options の下にあるJDBC/ODBC タブを選択することで見つけることができます。
プロジェクトをリビルドして実行します。このようにDatabricks からデータを直接取得し、HTML テーブル形式にレンダリングしています。
もちろんSaaS データソースへの接続の場合には、RDB 向けのドライバーと違い最終的にはHTTP リクエストが行われるので、サーバーサイド Blazor としてサーバーサイドから実行されるのか、クライアントサイド Blazor として、実行中のブラウザからHTTPリクエストが行われるのかの違いはあります。そのあたりはネットワークやプロキシの設定として注意が必要でしょう。設定はコード内の接続プロパティで可能です。
