MicroStrategy Desktop でCData JDBC Driver を使ってHDFS に接続する

こんにちは！ウェブ担当の加藤です。マーケ関連のデータ分析や整備もやっています。

MicroStrategy は、データ主導のイノベーションを可能にする、モビリティプラットフォームです。MicroStrategy をCData JDBC Driver for HDFS とペアリングすると、MicroStrategy からリアルタイムHDFS へのデータベースのようなアクセスが得られ、レポート機能と分析機能が拡張されます。この記事では、MicroStrategy Desktop にデータソースとしてHDFS を追加し、HDFS の簡単なヴィジュアライゼーションを作成する方法について説明します。

CData JDBC ドライバーは、ドライバーに組み込まれた最適化されたデータ処理により、MicroStrategy でリアルタイムHDFS と対話するための比類のないパフォーマンスを提供します。MicroStrategy からHDFS に複雑なSQL クエリを発行すると、ドライバーはフィルタや集計などのサポートされているSQL 操作をHDFS に直接プッシュし、組み込みSQL エンジンを利用して、サポートされていない操作(一般的にはSQL 関数とJOIN 操作) をクライアント側で処理します。組み込みの動的メタデータクエリを使用すると、ネイティブのMicroStrategy データタイプを使用してHDFS を視覚化および分析できます。

MicroStrategy Desktop を使用してHDFS のデータに接続および視覚化する

MicroStrategy エンタープライズ製品のHDFS に接続するだけでなく、MicroStrategy Desktop のHDFS に接続することもできます。以下のステップに従って、JDBC を使用してHDFS をデータセットとして追加し、HDFS の視覚化とレポートを作成します。

1. MicroStrategy Desktop を開き、新しいドシエを作成します。
2. データセットパネルで［New Data］をクリックし、［Databases］を選択して［Import Option］として［Select a Table］を選択します。
3. 新しいデータソースを追加し、DSN レスデータソースオプションを選択します。
4. ［Database］メニューで［Generic］を、［Version］メニューで［Generic DBMS］を選択します。
5. リンクをクリックして接続文字列を表示し、接続文字列を選択して編集します。［Driver］メニューで［MicroStrategy Cassandra ODBC Driver］を選択します。(MicroStrategy では、JDBC を介してインターフェースするために認定ドライバーが必要です。実際のドライバーは使用されません。)
6. 接続文字列を以下のように設定し、［OK］をクリックします。
   • JDBC キーワードを接続文字列に追加します。
   • MSTR_JDBC_JAR_FOLDER をJDBC ドライバーJAR ファイルのパスに設定します。(C:\Program Files\CData JDBC Driver for HDFS\lib\ on Windows.)
   • DRIVER をドライバークラスであるcdata.jdbc.hdfs.HDFSDriver に設定します。
   • URL をHDFS のJDBC URL に設定し、必要な接続プロパティを設定します。

     HDFS 接続プロパティの取得・設定方法

     HDFS への認証には、次の接続プロパティを設定します。

     • Host：HDFS インスタンスのホストに設定してください。
     • Port: HDFS インスタンスのポートに設定してください。デフォルトのポートは"50070" です。

     ビルトイン接続文字列デザイナ

     JDBC URL の構成については、HDFS JDBC Driver に組み込まれている接続文字列デザイナを使用してください。JAR ファイルのダブルクリック、またはコマンドラインからJAR ファイルを実行します。

     java -jar cdata.jdbc.hdfs.jar

     接続プロパティを入力し、接続文字列をクリップボードにコピーします。

     JDBC URL を構成する際に、Max Rows プロパティを定めることも可能です。これによって戻される行数を制限するため、可視化・レポートのデザイン設計時のパフォーマンスを向上させるのに役立ちます。

   以下は一般的な接続文字列です。

   JDBC;MSTR_JDBC_JAR_FOLDER=PATH\TO\JAR\;DRIVER=cdata.jdbc.hdfs.HDFSDriver;URL={jdbc:hdfs:Host=sandbox-hdp.hortonworks.com;Port=50070;Path=/user/root;User=root;};
7. 新しいデータソースを右クリックし、［Edit catalog］オプションを選択します。
8. SQL ステートメントをSELECT * FROM SYS_SCHEMAS に編集し、JDBC ドライバーからメタデータを読み取ります。
9. 新しいデータソースを選択し、使用可能なテーブルを表示します。テーブルを表示するには、［Available Tables］セクションの検索アイコンを手動でクリックする必要がある場合があります。
10. テーブルをペインにドラッグしてインポートします。 Noteライブ接続を作成するため、テーブル全体をインポートしてMicroStrategy 製品に固有のフィルタリングおよび集計機能を利用できます。
11. ［Finish］をクリックし、ライブに接続するオプションを選択します。CData JDBC Drivers のネイティブな高性能データ処理のおかげで、効果的なライブ接続が可能です。
12. ビジュアライゼーションと表示するフィールドを選択し、フィルタを適用してHDFS の新しいビジュアライゼーションを作成します。データタイプは、動的メタデータ検出によって自動的に検出されます。可能な場合、フィルタと集計によって生成された複雑なクエリはHDFS にプッシュダウンされ、サポートされていない(SQL 関数とJOIN 操作を含み得る) 操作は、ドライバーに埋め込まれているCData SQL エンジンによってクライアント側で管理されます。
13. ドシエの構成が完了したら、［File］->［Save］をクリックします。

MicroStrategy Desktop のCData JDBC Driver for HDFS を使用すると、HDFS で安定したビジュアライゼーションとレポートを簡単に作成できます。その他の例については、MicroStrategy Developer のHDFS に接続 やMicroStrategy Web のHDFS に接続 などの記事をお読みください。