各製品の資料を入手。
詳細はこちら →Yahoo! JAPAN データソリューションデータ連携用のPython Connector ライブラリ。pandas、SQLAlchemy、Dash、petl などの主要なPython ツールにスマレジをシームレスに統合。 Python や各種ツールからYahoo! JAPAN DATA SOLUTION データに連携できるPython データベース API(DB-API)モジュール。
機能紹介
- 非DB データソースへのパワフルなメタデータクエリで、SQL ライクなデータアクセスを実現
- クエリ最適化により、可能な限りSQL オペレーションをサーバー側にプッシュし、パフォーマンスを最適化
- サーバーサイドでサポートされないクエリでも、クライアントサイドのSQL 実行エンジンによりSQL-92 オペレーションを実現
- Yahoo! JAPAN DATA SOLUTION データにリアルタイムアクセス
- BI、帳票、ETL ツールやカスタムアプリへのシームレスなデータ連携
- データ集計、複雑なJOIN クエリなどのSQL をフルサポート
製品仕様
- アプリケーションデータ連携用のPython Database API (DB-API) モジュール。
- 使い慣れたSQL でYahoo! JAPAN DATA SOLUTION データにアクセス。Yahoo! JAPAN DATA SOLUTION に使い慣れたPython Database Connectivity でデータ連携。
- pandas、SQLAlchemy、Dash、petl などの人気のPython ツールにシームレスに統合。
- データ、パラメータ、メタデータでUnicode をフルサポート。
CData Python Connectors の紹介動画
CData Python Connectors の基本的な使い方を紹介する動画でシンプルかつパワフルな連携をご覧ください。
Python Connector 動画を見るPython からYahoo! JAPAN DATA SOLUTION にデータ連携
サポートされたデータソースにわたり統一されたSQL アクセスを実現するPyton Connector
-
Python からYahoo! JAPAN DATA SOLUTION への標準連携
Yahoo! JAPAN DATA SOLUTION データに以下のPython ベースのフレームワークから連携を実現:
- データ分析/ビジュアライゼーション:Jupyter Notebook、pandas、Matplotlib
- ORM:SQLAlchemy、SQLObject、Storm
- ウェブアプリケーション:Dash、Django
- ETL:Apache Airflow、Luigi、Bonobo、Bubbles、petl
-
Python 標準ツールへの統合
Yahoo! JAPAN DATA SOLUTION Connector は、Anaconda、Visual Studio Python IDE、PyCharm などの人気のデータサイエンスおよび開発ツールに統合して利用可能です。
-
レプリケーションとキャッシング
CData のレプリケーションやキャッシングコマンドにより、簡単にローカルおよびクラウドデータストア(Oracle、SQL Server、Google Cloud SQL、etc.)へのデータのコピーができます。レプリケーションコマンドはインテリジェントな差分更新によるデータのキャッシュを行う機能を備えています。
-
文字列型、日付型、数値型のSQL 関数群
Yahoo! JAPAN DATA SOLUTION Connector は50以上の関数ライブラリを持ち、カラムと出力フォーマットを操作します。代表的な例では正規表現、JSON、およびXML 処理機能があります。
-
コラボラティブクエリ処理
Python Connector はクライアント側における追加処理を実現することにより、接続するデータソースの機能を高め、SUM、AVG、MAX、MIN などの分析集計を可能にします。
-
容易なスキーマのカスタマイズ
Yahoo! JAPAN DATA SOLUTION Connector のデータモデルはテーブル / カラムの追加や削除、データ型の変更などのカスタマイズが簡単に行えます。追加ビルドは不要です。カスタマイズは、human-readable スキーマを使ってランタイムで編集ができます。
-
セキュアな接続
すべてのクライアント - サーバー間接続において、TLS / SSL データ暗号化などのエンタープライズレベルのセキュリティ機能が備わっています。
Python でYahoo! JAPAN DATA SOLUTION データに連携
CData Python Connectors は、標準化されたデータベースAPI(DB-API)インターフェースでYahoo! JAPAN DATA SOLUTION にアクセスすることができます。幅広いPython データツールからのデータ連携が簡単に実現します。Python からのデータ連携をデータソース固有のインターフェースを意識することなくベーシックなパターンで連携を行うことができます::
- Yahoo! JAPAN DATA SOLUTION に接続する接続プロパティを設定
- Yahoo! JAPAN DATA SOLUTION をクエリしてデータを取得・更新
- Python データツールからYahoo! JAPAN DATA SOLUTION データに連携
Python からYahoo! JAPAN DATA SOLUTION にデータ連携する方法
Python からデータに接続するには、エクステンションをインポートして接続を作ります:
import cdata.yahoo! japan data solution as mod conn = mod.connect("[email protected]; Password=password;") #Create cursor and iterate over results cur = conn.cursor() cur.execute("SELECT * FROM SearchRanking") rs = cur.fetchall() for row in rs: print(row)
エクステンションをインポートすると、使い慣れたPython モジュールやツールキットからあらゆるエンタープライズデータに連携が可能になり、データ活用のためのPython アプリケーションをすばやく構築できます。
pandas でYahoo! JAPAN DATA SOLUTION データをビジュアライズ
Yahoo! JAPAN DATA SOLUTION Python Connector はデータセントリックなインターフェースを備え、pandas やSQLAlchemy をはじめとするツールに統合して利用してデータを分析しビジュアライズすることができます。
engine = create_engine("yahoo! japan data solution///Password=password&User=user") df = pandas.read_sql("SELECT * FROM SearchRanking", engine) df.plot() plt.show()