「CData Sync」に関する記事

2021年03月16日

Salesforceで削除したレコードの連携方法について:CData Sync

こんにちは、CData Software Japan エンジニアの宮本です。 CData Sync では Salesforce の削除レコードについて、「物理削除」、「論理削除」、「スキップ」という3つの方法で連携先に反映させることができます。 今回はこちらの3つの方法で Salesforce …

2021年02月10日

CDataSync からOAuth認証でJIRAに接続する方法

こんにちは、CData Software Japan エンジニアの宮本です。 今回は CData Sync から JIRA への接続方法として OAuth 認証をサポートしましたので、実際に接続する方法をご紹介したいと思います。 JIRA Cloud でのパスワードを使用したベーシック認証が廃止 C…

2021年02月10日

Backlogで管理している課題をBigQueryに連携してみる:CData Sync

こんにちは!CData Software Japanの宮本です! 今回はプロジェクト管理ツールの Backlog で管理している課題を、ELT ツールのCData Sync を使って外部DBにレプリケートする方法をご紹介します。 backlog とは? 開発からマーケティング、人事・総務まで様々…

2021年02月08日

CData Sync アップデート情報 2021年2月

こんにちは、CData Software Japan エンジニアの宮本です。 今回は 2021年2月の CData Sync アップデート情報をご紹介します。 1.Google Cloud Storage が同期先に追加 2.AWS AMI および AzureMarketplace 管理用のドキュメントを追加 3.クラウドスト…

2021年01月08日

BigQueryへのリクエストでエラー:Request payload size exceeds the limit

BigQueryへのリクエストでエラー:Request payload size exceeds the limit

2020年12月28日

AMI版CDataSyncにRoute53で取得したドメインを設定してみる

こんにちは!CData Software Japan エンジニアの宮本です。 CData Sync では.NET版、Java版のインストーラーでセットアップする以外に、AWS Marketplace でAMI 版CData Sync を利用することができます。 Marketplace の画面でポチポチっとするだけですぐにCD…

2020年12月28日

GCEインスタンスのアクセススコープを使用してBigQuery へのアクセス制御を試してみる:CData Sync

こんにちは、CData Software Japan エンジニアの宮本です。 GCE のVMインスタンスでは、インスタンスごとにアクセススコープを設定できるのはご存知でしょうか。以下のようにインスタンスからGCP 上のサービスにアクセスできる範囲を設定することができるよ…

2020年12月24日

製造業向けMAツール - MRC(マーケライズクラウド) の顧客データを Google BigQuery へ定期的に連携する:CData Sync

こんにちは。CData Software Japan リードエンジニアの杉本です。 本記事では 分析基盤向けデータ統合の自動化ツールである CDataSync を使って、MRCのデータを Google BigQuery に連携し、分析する方法を紹介したいと思います。 MRC(マーケライズクラウド…

2020年12月22日

GCP内で完結!BigQuery にSaaS データをローディングする構成について

本記事はBigQuery Advent Calendar 2020 22日目の記事です。 qiita.com こんにちは!CData Software Japan エンジニアの宮本です。 2020年もあっという間に終わろうとしていますが、この1年を思い返してみると、感覚的に去年に比べてBigQuery を軸にした相…

2020年12月21日

CDataSync に新しく追加された同期先:Azure Synapse の使い方

こんにちは。CData Software Japan リードエンジニアの杉本です。 今回は先週新しくリリースされたばかりのCDataSync新機能、Azure Synapseへのデータ同期を紹介したいと思います。 Azure Synapse Analytics とは? 連携シナリオ 必要なもの Azure Synapse A…

2020年12月18日

CData Syncを用いたAzure SQL Database -> Amazon Redshift へのデータ統合

CData Syncを用いたAzure SQL Database -> Amazon Redshift へのデータ統合

2020年12月14日

ELTツール+Dataform でBigQuery へのデータロード・チェック・マージを自動化してみた:CDataSync

こんにちは、CData Software でエンジニアをしている宮本です。 先日、Google からDataform がGCP の傘下になったとアナウンスがありました。 cloud.google.com 自分自身、Dataform というサービスを知らなかったのですが、Webサイトやドキュメントなどを読…