「s3」に関する記事

2023年05月22日

Amazon S3 からのファイル取り込みがより簡単に|CData Sync v23 リリース記事

CData SyncではAmazon S3(以下、S3)内のファイル取り込みをサポートしてきました。しかし、従来の方式では、S3内の個別ファイルを指定する必要があり、複数ファイルを取り込む際の設定に追加の設定が必要でした。CData Sync v23ではファイルが格納されているS3内のディレクトリを指定するだけで、ディレクトリ内の同じフォーマットのファイルを全て取得して、単一のテーブルにレプリケーションすることができるようになりました。また、CData Syncはディレクトリ内の各ファイルの最終更新日時をチェックし、新しいファイルのみを取り込むことが可能ですので、重複データの取り込みを防ぎ、ロード時間を大幅に短縮することが可能です。

2023年05月11日

CData Sync のTips 集

CData Sync は、Salesforce やkintone などのSaaS やRDB データを各種DB にレプリケーション(複製)できるデータパイプラインツールです。 CData Sync 概要 CData Sync 概要 from CData Software Japan データソースとして対応するSaaS、DB は400種類以上 S…

2022年08月31日

Box、Google Drive、S3 などのクラウドストレージのCSV、Excel ファイルへの接続プロパティが階層構造で使いやすく

このたびのV22 へのアップデートで、Box、Google Drive、Amazon S3 などのクラウドストレージ上のCSV、Excel ファイルのデータにアクセスする際に、接続プロパティが階層構造になり使いやすくなりました。

2021年04月13日

CData Amazon Athena Driver の「AWS(IAM) ロールとして認証」の使い方

こんにちは。CData Software Japanリードエンジニアの杉本です。 今回は CData Amazon Athena Driver の主要な接続方法の一つである「AWS IAM ロール」を使った方法を紹介したいと思います。 www.cdata.com Amazon Athena Driverがサポートしている接続方法 …

2021年01月08日

AWS Glue Studio でSalesforce→S3 データ連携ジョブを作成

はじめに Glue Studioは、AWSの完全マネージド型ETLサービスをGUIからジョブを作成できる機能です。 docs.aws.amazon.com CDataでは、GlueおよびGlue Studio にて、会計・CRM・ERP・MA・グループフェアなどの多種多様なSaaSやNoSQLデータベースからデータを…

2020年10月20日

データ分析ツールnehan を利用した コロナ関連tweet分析シリーズ のご紹介

こんにちは。CData技術ディレクター桑島です。 弊社のパートナーでもある[nehan](https://nehan.io/) 社がQiita上にユニークなデータ分析のブログ記事を掲載されていたので本サイトでもご紹介させていただきます。nehan 社は「誰でも簡単にデータ分析ができ…

2020年08月05日

Dropbox 内のファイルをS3 に同期させる

今回は、MFT(ファイル転送)ツールのCData Arc を使って、Dropbox に入っているファイル群をS3 に同期させます。 Dropbox からS3 にデータを同期 CData Arc でフローを作成 CData Arc をDL してインストールします。 www.CData Arc.com インストールを進めます。インス…