BigQuery データをSQL Server に連携して利用する4つの方法を比較

こんにちは！ドライバー周りのヘルプドキュメントを担当している古川です。

この記事では、SQL Server でBigQuery データを使うというシナリオにフォーカスして実現方法やメリット＆デメリットを解説します。

1. ODBC Driver からCACHE クエリでBigQuery データをSQL Server に同期

一番簡単な方法として、CData ODBC Driver for GoogleBigQuery でCACHE クエリを実行する方法があります。CData ODBC ドライバはCACHE をサポートしており、メタデータのみのキャッシュから明示的にデータを含むCACHE を発行可能です。

詳細はこちら： BigQuery データをPowerShell script でSQL Server にレプリケートする方法

ODBC Driver for GoogleBigQuery のDSN 設定でCACHE 設定を行います。以下のようにCACHE SELECT というSQL を発行することで、選択したテーブルのデータをコピーできます。

• 設定の簡単さ：★★

• 環境の簡単さ：★★★

• ライセンスコスト：★★★

• リアルタイム性：★

• 連携はBigQuery → SQL Server の片方向のみ

• 柔軟性：★★

簡単な.NET デスクトップアプリでCACHE クエリを定期的に発行することもできますし、記事のようにPowerShell からスクリプトで実行することもできます。PowerShell ですとWindows マシンからアプリのデプロイなどをしなくても使えますし、定期実行ができるのでお手軽です。

必要なCData 製品のライセンスはODBC Driver 1本のみなので、低価格でBigQuery → SQL Server の実装が可能です。とはいえバッチ連携ですので、リアルタイムなBigQuery データを扱えない点は少し残念です。またSQL やPowerShell スクリプトを書いたり、バッチ処理を行うアプリを作成する必要があります。

CData では、BigQuery PowerShell Cmdlets も提供しています。Cmdlets を使えば、中継用のアプリケーションを作成せずにPowerShell だけでBigQuery からSQL Server にデータをコピーすることが可能です。PowerShell Cmdlets については こちらを参照してください。

2. SQL Gateway でSQL Server のリンクサーバーとしてBigQuery データにアクセス

SQL Server には、リンクサーバーという他のDB をSQL Server から呼び出せる統合機能があります。CData ODBC Driver for GoogleBigQuery に付属しているSQL Gateway を使えば、BigQuery データをSQL Server のリンクサーバーとして扱うことができます。BigQuery データがSQL Server 保存されるわけではありませんが、SQL Server のインターフェースでBigQuery データをSQL を使って呼び出すことができます。

設定方法はこちら：BigQuery データにSQL Server のリンクサーバーとして接続

通常のODBC Driver for GoogleBigQuery のDSN 設定の後にSQL Gateway を立ち上げ、BigQuery DSN をSQL Server のサービスとして設定します。SQL Server Management Studio でこのサービスをリンクサーバーとして登録すると、SQL クエリでBigQuery データをリンクサーバー経由で使用することができます。 複数の.NET クライアントアプリからのBigQuery データ参照や、SQL Server データとのJOIN などに最適です。

• 設定の簡単さ：★

• 環境の簡単さ：★

• ライセンスコスト：★★

• リアルタイム性：★★★

• 連携はBigQuery → SQL Server および、SQL Server → BigQuery の双方向が可能

• 柔軟性：★★

SQL Server のリンクサーバーに慣れ親しんだ方には一番使いやすい利用方法です。常に最新のBigQuery データをリアルタイムにクエリできる点も優れています。SQL Server 側からSQL で双方向連携（書き込みを含む）できる点が大変便利です。

手間としてはSQL Gateway をホスティングして稼働させなければならない点があります。またSQL Gateway は、ODBC Driver for GoogleBigQuery のサーバーライセンスに同梱されています。

そして、SQL Server のリンクサーバーを使えば、SQL Server → BigQuery の方向の連携も可能になります。SQL Server 側のストアドプロシージャでBigQuery へのSQL Server データの書き込みができます。

3. SSIS でkintone データをSQL Server にインポート

SQL Server ユーザーの中には、データ統合・ワークフローにSSIS（SQL Server Integration Services）を使っている方も多いのではないでしょうか。CData では、SSIS 向けにBigQuery への連携が可能なSSIS Components for GoogleBigQuery を提供しています。

技術記事： SSIS を使ってBigQuery データをSQL Server にインポート

• 設定の簡単さ：★★

• 環境の簡単さ：★★

• ライセンスコスト：★★

• リアルタイム性：★★

• 連携はBigQuery → SQL Server および、SQL Server → BigQuery の双方向が可能

• 柔軟性：★★★

SSIS ユーザーであれば、BigQuery Components さえあれば、簡単にSQL Server へのインポートフローを組むことができます。コンポーネントもドライバーと同程度の価格でありリーズナブルです。

SSIS 以外でもすでにETL / EAI ツールをお持ちであれば、CData Drivers をETL / EAI ツールで使うだけで簡単にデータ連携が可能です。

4. CData Sync でBigQuery データをSQL Server に反復同期

最後はCData Sync というSaaS データをRDB に同期する専用のアプリケーションを使う方法です。CData Sync はサーバーアプリケーションになっており、ブラウザコンソールからノーコードで3ステップで同期ジョブが設定できます。

定期実行や細かいレプリケーションの項目設定までをGUI 操作だけで実行可能です。

設定方法はこちら：SQL Server にBigQuery のデータを連携・統合する方法

• 設定の簡単さ：★★★

• 環境の簡単さ：★★

• ライセンスコスト：★

• リアルタイム性：★

• 連携はBigQuery → SQL Server の片方向のみ

• 柔軟性：★★★

DB への同期専用のノーコードツールであり、使いやすさや拡張性は高いです。サーバーツールですので、価格は#2 と同程度になります。

無償トライアルでBigQuery をSQL Server に連携

BigQuery → SQL Server の連携の4つの実装方法を紹介しました。利用の規模や技術的な制約によっていろいろな方法があります。ぜひ、自分のケースに合った連携方法を選んでください。 記事で紹介した4つの方法の実行に必要な製品は以下になります。どの製品も30日間の無償トライアルが利用できますので、ぜひお試しください。

• BigQuery ODBC Driver
• BigQuery SSIS Components
• CData Sync