「BigQuery」に関する記事

BQ2Redshift
2024年05月07日

Google Analytics 4 の生データを Amazon Redshift に継続的レプリケーション

今回はCData が提供しているパイプラインツール「CData Sync」を使用して BigQuery に蓄積されたGA4 の生データを Redshift に自動で継続的にレプリケーションするフローを構築してみたいと思います。

2023年09月11日

DWH のデータが多すぎてPower BI で使えない?DirectQuery を活用しましょう!

Power BI のDirectQuery 機能とCData Power BI コネクタを使って、大規模なGoogle BigQuery データをリアルタイムに分析する方法を紹介します。データインポートのお悩みを解消!

2023年08月02日

BigQuery の MERGE ステートメントを CData Sync でサポート!

CData Sync V23.2 では同期先コネクタの機能追加も行われ、その一種として BigQuery 上でMerge ステートメントを使った方式のレプリケーションもサポートされました!

2023年05月11日

CData Sync のTips 集

CData Sync は、Salesforce やkintone などのSaaS やRDB データを各種DB にレプリケーション(複製)できるデータパイプラインツールです。 CData Sync 概要 CData Sync 概要 from CData Software Japan データソースとして対応するSaaS、DB は400種類以上 S…

2023年04月19日

Bカートの受注データを Google BigQuery へ定期的に連携する:CData Sync

こんにちは。CData Software Japan リードエンジニアの杉本です。 本記事では 分析基盤向けデータ統合の自動化ツールである CDataSync を使って、Bカートの受注データを Google BigQuery に連携し、分析する方法を紹介したいと思います。 Bカート とは? Bカ…

2023年02月20日

Amazon S3 の日別フォルダから動的にファイルを取り出してBigQuery にレプリケーションする:CData Sync

データパイプラインツールのCData Sync を使って、Amazon S3 に日別に作成されたフォルダに格納されているCSV ファイルの中身を動的に取得し、BigQuery に連携する方法をご紹介します。

2022年09月05日

BigQuery やSnowflake などのデータソース側で提供される独自関数をNATIVEQUERY 機能を使ってDriver 経由で利用可能に!

BigQuery や Snowflake などのSQL が実行できる各種サービス先の便利な関数をCData Driver から利用する方法をご紹介します。

2022年08月18日

SAP ERP(ECC・S/4 HANA等)のデータをGoogle BigQueryにレプリケートする方法:CData Sync

CData Software ではSAP ERPなどのデータをローコードでBigQueryにレプリケーションできる CData Sync というプロダクトを提供しています。今回はこのCData Sync を用いて SAP ERPのデータをBigQueryにレプリケーションする方法およびその時のポイントを解説します。

2022年07月25日

KARTE Datahub から kintone にある顧客情報をCData Sync 経由で利用する方法

CX プラットフォームのKARTE 上で kintone で保持しているデータを利用する方法として、CDataSync を使って kintone から BigQuery にレプリケーションして、KARTE Datahub からアクセスする方法をご紹介します。

2022年05月13日

ログベースによる変更データキャプチャ(CDC)で PostgreSQL からBigQuery にレプリケーション:CData Sync

こんにちは、テクニカルサポートの宮本です! 最近、Debezium などの変更データキャプチャに特化した SaaS がいくつか提供されていたりと、Change Data Capture(CDC)というワードを見かける機会が増えてきたなと個人的に感じています。 Change Data Captur…

2022年05月09日

インフルエンサーのTwitterフォロワー数の推移をデータポータルで可視化!Twitter×CDataSync×BigQuery×データポータル

こんにちは、テクニカルサポートエンジニアの宮本です! 1日1回は何かしらの SNS でインフルエンサーが発信している情報を見る機会はないでしょうか?最近はインフルエンサーを使ったインフルエンサーマーケティングというのもあるようで、マーケティング手…

2022年04月11日

STORES予約で管理している予約情報をBigQuery に同期してみる:CData Sync

こんにちは、テクニカルサポートエンジニアの宮本です! 今回は STORES予約で管理している予約情報を、ETL/ELT ツールの CData Sync を使って Cloud データウェアハウスの BigQuery に同期する方法をご紹介します。 STORES予約とは stores.jp STORES予約は 2…