Apache Spark JDBC Driver

Spark JDBC Driver のスタートアップガイド

Apache Spark JDBC Driver の利用を始めましょう。標準Java JDBC ドライバーであるApache Spark Driver は、Java/J2EE アプリケーションと同様にEclipse、IntelliJ、NetBeans などの主要なIDE にシームレスに統合します。

Eclipse 統合 - データエクスプローラー

JDBC ドライバーである Apache Spark JDBC Driver を使って、Spark に一般的なJava IDE で利用可能なデータソースエクスプローラーから直接データ連携できます。

エンタープライズレベルのリモーティング

Apache Spark SQL データのMySQL / SQL エントリーポイント

CData JDBC ドライバーには完全に統合されたパワフルなリモーティング機能が備わっており、バーチャルにどこからでもApache Spark SQL にアクセスできます。CData ドライバーは、インカミングSQL およびMySQL クライアント接続の受容と、データベースの標準リクエストへのサービスのオプション機能を備えています。

CData JDBC ドライバーを使って、SQL Server またはMySQL をサポートするあらゆるクライアントからApache Spark SQL データに連携できます。ウェブやモバイルアプリケーションからCRM、CMS システム、SQL Server Analysis Services のようなBI ツール、さらにはMySQL Workbench のような馴染みのあるマネージメントアプリケーションなどでの連携が可能です。

• 外部データにアクセスできるいかなるアプリケーションからでも、Apache Spark SQL にバーチャルにアクセスします。SQL Server またはMySQL データにアクセスできるアプリケーションであれば、このドライバーを使ってApache Spark SQL に接続できます。
• Apache Spark SQL をSQL Server Analysis Services のような馴染みのあるBI ツールに接続できます。
• SQL リンクサーバー接続経由で、エンタープライズApache Spark SQL 統合を実現します。
• リモートデータベース接続の業界標準であるMySQL およびSQL (TDS) リモートアクセスプロトコルをサポートしています。
• リモート接続には高度なワイヤプロトコル SSL セキュリティを提供しています。

コーディングによるApache Spark SQL データへの接続

Spark ドライバーはSQL Server またはMySQL の標準インターフェースを備え、データの読み出し / 書き込み（CRUD）をサポートします。どのソリューションアーキテクチャであっても、このパワフルなリモーティング機能を使ってアプリケーションを簡単にApache Spark SQL に接続できます。

標準的なクライアントライブラリの一つを使ってNET、Java、PHP、Python、Ruby、Objective-C、etc. からSQL / MySQL にアクセスし、Spark への統合を始めましょう。

エンタープライズレベルのJDBC 接続

Apache Spark JDBC Driver を使って、Java / J2EE アプリケーションから簡単に Spark にデータ連携することができます。RDB へのアクセスと同じ感覚で、Apache Spark Driver を使うだけでデータに標準SQL でアクセス。CData ドライバーは単体で機能し、追加のソフトウェアのインストールは不要です。

• さまざまなツールを使ってSpark にアクセス。JDBC インターフェースを使って、Java ベースのアプリケーションおよび開発テクノロジーからSpark にアクセス可能です。
• リモート接続の高度なワイヤプロトコルSSL セキュリティ。
• アプリケーションの配布および設定の高速化。

BI、ETL、帳票ツールからSpark に接続

JDBC はJava ベースのアプリケーションをデータに接続するためのインターフェースで、幅広くサポートされています。多くのBI、帳票、ETL、データベース、およびアナリティクスツールが、JDBC 接続でデータの読み書きを行う機能を備えています。

• DBeaver
• DbVisualizer
• IntelliJ
• DataSpider
• AWS Glue
• UnitBase
• Databricks
• Apache Spark
• Apache Nifi
• Apache Tomcat
• Cloud Data Fusion
• Mendix
• JasperSoft Studio
• KNIME
• JBoss
• Apache Camel
• R
• Neuron
• Apache Solr
• Crystal Reports
• Denodo
• Actionista!
• QuickSolution
• その他多数のツールに対応

Apache Spark Driver により、標準準拠のJava JDBC ドライバーでSpark サービスに複雑な操作なしにデータ連携ができます。アプリケーションからApache Spark Driver を通じてシンプルなTransact-SQLを使い、Spark にアクセスします。

CData JDBC Driver for Apache Spark はデータ連携の問題を解決し、パワフルなセキュリティ機能、スマートキャッシング、バッチ処理、ソケットマネジメントなどを実現します。

Spark アプリケーション統合

Apache Spark Driver はConnection、Statement、ResultSet を含む、MySQL やOLEDB 向けのJDBC ドライバーと同じJDBC アーキテクチャを有します。そのため、Spark データに使い慣れた方法で連携できます。Apache Spark Driver は標準的なIDE（Eclipse、IntelliJ、NetBeans、etc.）で利用できます。馴染みのあるクラスでのコーディングや、Swing やEclipse SWT Widgets などのデータコントロールから利用できます。

例：

Connection conn = 
	DriverManager.getConnection("jdbc:spark:user=myuseraccount;password=mypassword;");

boolean ret = stat.execute("SELECT * FROM ApacheSpark");
ResultSet rs=stat.getResultSet();
while(rs.next()){
  for(int i=1;i<=rs.getMetaData().getColumnCount();i++)
  {
    System.out.println(rs.getMetaData().getColumnName(i) +"="+rs.getString(i));
  }
}

双方向連携：CRUD をフルサポート

Apache Spark Driver はRead-only 機能にとどまらず、CRUD 処理（作成、取得、更新、削除）をフルサポートしています。アプリケーションのエンドユーザーはRDB を利用するように、Apache Spark Driver が表示するデータを簡単に活用できます。

Connection conn = 
	DriverManager.getConnection("jdbc:spark:user=myuseraccount;password=mypassword;");
	
String query = "UPDATE ApacheSpark SET Where= ..."; 

PreparedStatement pstmt = conn.prepareStatement(query);
pstmt.setString(1, "Location");
pstmt.setString(2, "UID");
pstmt.execute();
int count=pstmt.getUpdateCount();