Impala データをSQL Server に連携して利用する4つの方法を比較

こんにちは！ドライバー周りのヘルプドキュメントを担当している古川です。

この記事では、SQL Server でImpala データを使うというシナリオにフォーカスして実現方法やメリット＆デメリットを解説します。

1. ODBC Driver からCACHE クエリでImpala データをSQL Server に同期

一番簡単な方法として、CData ODBC Driver for ApacheImpala でCACHE クエリを実行する方法があります。CData ODBC ドライバはCACHE をサポートしており、メタデータのみのキャッシュから明示的にデータを含むCACHE を発行可能です。

詳細はこちら： Impala データをPowerShell script でSQL Server にレプリケートする方法

ODBC Driver for ApacheImpala のDSN 設定でCACHE 設定を行います。以下のようにCACHE SELECT というSQL を発行することで、選択したテーブルのデータをコピーできます。

• 設定の簡単さ：★★

• 環境の簡単さ：★★★

• ライセンスコスト：★★★

• リアルタイム性：★

• 連携はImpala → SQL Server の片方向のみ

• 柔軟性：★★

簡単な.NET デスクトップアプリでCACHE クエリを定期的に発行することもできますし、記事のようにPowerShell からスクリプトで実行することもできます。PowerShell ですとWindows マシンからアプリのデプロイなどをしなくても使えますし、定期実行ができるのでお手軽です。

必要なCData 製品のライセンスはODBC Driver 1本のみなので、低価格でImpala → SQL Server の実装が可能です。とはいえバッチ連携ですので、リアルタイムなImpala データを扱えない点は少し残念です。またSQL やPowerShell スクリプトを書いたり、バッチ処理を行うアプリを作成する必要があります。

CData では、Impala PowerShell Cmdlets も提供しています。Cmdlets を使えば、中継用のアプリケーションを作成せずにPowerShell だけでImpala からSQL Server にデータをコピーすることが可能です。PowerShell Cmdlets については こちらを参照してください。

2. SQL Gateway でSQL Server のリンクサーバーとしてImpala データにアクセス

SQL Server には、リンクサーバーという他のDB をSQL Server から呼び出せる統合機能があります。CData ODBC Driver for ApacheImpala に付属しているSQL Gateway を使えば、Impala データをSQL Server のリンクサーバーとして扱うことができます。Impala データがSQL Server 保存されるわけではありませんが、SQL Server のインターフェースでImpala データをSQL を使って呼び出すことができます。

設定方法はこちら：Impala データにSQL Server のリンクサーバーとして接続

通常のODBC Driver for ApacheImpala のDSN 設定の後にSQL Gateway を立ち上げ、Impala DSN をSQL Server のサービスとして設定します。SQL Server Management Studio でこのサービスをリンクサーバーとして登録すると、SQL クエリでImpala データをリンクサーバー経由で使用することができます。 複数の.NET クライアントアプリからのImpala データ参照や、SQL Server データとのJOIN などに最適です。

• 設定の簡単さ：★

• 環境の簡単さ：★

• ライセンスコスト：★★

• リアルタイム性：★★★

• 連携はImpala → SQL Server および、SQL Server → Impala の双方向が可能

• 柔軟性：★★

SQL Server のリンクサーバーに慣れ親しんだ方には一番使いやすい利用方法です。常に最新のImpala データをリアルタイムにクエリできる点も優れています。SQL Server 側からSQL で双方向連携（書き込みを含む）できる点が大変便利です。

手間としてはSQL Gateway をホスティングして稼働させなければならない点があります。またSQL Gateway は、ODBC Driver for ApacheImpala のサーバーライセンスに同梱されています。

そして、SQL Server のリンクサーバーを使えば、SQL Server → Impala の方向の連携も可能になります。SQL Server 側のストアドプロシージャでImpala へのSQL Server データの書き込みができます。

3. SSIS でkintone データをSQL Server にインポート

SQL Server ユーザーの中には、データ統合・ワークフローにSSIS（SQL Server Integration Services）を使っている方も多いのではないでしょうか。CData では、SSIS 向けにImpala への連携が可能なSSIS Components for ApacheImpala を提供しています。

技術記事： SSIS を使ってImpala データをSQL Server にインポート

• 設定の簡単さ：★★

• 環境の簡単さ：★★

• ライセンスコスト：★★

• リアルタイム性：★★

• 連携はImpala → SQL Server および、SQL Server → Impala の双方向が可能

• 柔軟性：★★★

SSIS ユーザーであれば、Impala Components さえあれば、簡単にSQL Server へのインポートフローを組むことができます。コンポーネントもドライバーと同程度の価格でありリーズナブルです。

SSIS 以外でもすでにETL / EAI ツールをお持ちであれば、CData Drivers をETL / EAI ツールで使うだけで簡単にデータ連携が可能です。

4. CData Sync でImpala データをSQL Server に反復同期

最後はCData Sync というSaaS データをRDB に同期する専用のアプリケーションを使う方法です。CData Sync はサーバーアプリケーションになっており、ブラウザコンソールからノーコードで3ステップで同期ジョブが設定できます。

定期実行や細かいレプリケーションの項目設定までをGUI 操作だけで実行可能です。

設定方法はこちら：SQL Server にImpala のデータを連携・統合する方法

• 設定の簡単さ：★★★

• 環境の簡単さ：★★

• ライセンスコスト：★

• リアルタイム性：★

• 連携はImpala → SQL Server の片方向のみ

• 柔軟性：★★★

DB への同期専用のノーコードツールであり、使いやすさや拡張性は高いです。サーバーツールですので、価格は#2 と同程度になります。

無償トライアルでImpala をSQL Server に連携

Impala → SQL Server の連携の4つの実装方法を紹介しました。利用の規模や技術的な制約によっていろいろな方法があります。ぜひ、自分のケースに合った連携方法を選んでください。 記事で紹介した4つの方法の実行に必要な製品は以下になります。どの製品も30日間の無償トライアルが利用できますので、ぜひお試しください。

• Impala ODBC Driver
• Impala SSIS Components
• CData Sync