「Databricks」に関する記事

ai_world_tour_tokyo_2024
2024年11月19日

好評につき基調講演の限定配信が決定!Databricks Data + AI World Tour Tokyo 2024 レポート

11/14 (木) に都内で開催されたData + AI World Tour Tokyo にスポンサーとして参加してきましたので、そちらの模様についてレポートいたします。 追加での実施が発表されたオンライン配信の情報も記載していますのでぜひご覧ください。

CData Databricks Drivers でOAuth認証を使う
2024年11月01日

CData Databricks Drivers でOAuth認証を使う

CData Databricks Driversはv24.1でOAuth認証がサポートされました。これまでAzureのプリンシパルによるAzure AD認証をサポートしていましたが、Databricksのアカウントを使ったOAuth認証もできるようになりました。

databricks
2024年10月02日

Databricks Lakehouse Federation のデータソースとしてSalesforce などのSaaS 接続を追加する方法:CData Connect Cloud

こんにちは。CData Software Japan リードエンジニアの杉本です。 今回はDatabricks が提供するデータ仮想化機能、Lakehouse Federation とCData Connect Cloud の連携について紹介したいと思います。 # Databricks Lakehouse Federation とは? 統合データ分析プラットフォームのDatabricks が提供するデータ仮想化サービスです。

sapgateway2databricks
2024年04月11日

Databricks のUnity Catalog に SAP S/4HANA Cloud データをノーコードでレプリケーション

一般的に外部のSaaS やDB などのデータソースをDatabricks と連携する場合はETL  パイプラインを構築・運用することになりますが、CData Sync を使うことでCDCによる差分同時を含むノーコードでのデータ連携がシンプルな形で可能になり、データに対するアクセス制御などデータガバナンスへの対応やリネージデータによる変更履歴の管理、生成AI によるメタ情報の自動生成など、Databricks のもつパワフルな機能の活用がすぐに始められます。

2022年09月27日

CData Sync V22 新機能:History Mode の使い方

CData Sync では特徴的な機能の一つとして差分更新が存在します。 これはもとのデータソースの値の更新日付を元に、必要なデータだけデータベースやDWH上で更新する機能す。 これにより常に必要なデータのみをデータベースやDWHで更新でき、効率的にデータ分析基盤の管理が行なえます。 しかしながら、場合によってはそのデータがどのように更新されたのか? をトラッキングしたい場合があります。 例えばよく相談があるトピックとしては、Salesforceの商談データを分析する時に、受注確度や受注金額がどのように変わったのか?を可視化、追跡したい、というものです。 通常CData Sync でレプリケーションされたDWHやデータベース上のデータは最新の値しか保持しません。そのため「今の商談確度」はわかっても、過去どのような商談確度の変化があったのか? みたいな情報はわかりません。 「先月は受注予測金額が良い感じだったのに、なぜか今月は受注予測金額が少ない、受注確度が下がっている気がする」というのは営業チームではよくある話ではないでしょうか。 CData Sync V22 ではこのようなデータの変化をウォッチすることができるように、History Mode という機能が追加されました。

2021年08月10日

Databricks へのデータ転送をサポートしました:CData Sync Databricks Destination

こんにちは。CData Software Japan リードエンジニアの杉本です。 今日は CData Sync が新しくサポートしたデータ転送先、「Databricks」との連携を紹介したいと思います! Databricks とは? CData Sync Databricks Destination で何ができるの? 使い方 Da…

2020年01月16日

Databricks で Salesforce のデータをロードして分析処理を行う:CData JDBC Salesforce Driver

こんにちは。CData Software Japan リードエンジニアの杉本です。 今日はクラウドサービスのビッグデータ処理サービスである Databricks で CData JDBC Driverを利用する方法を紹介します。 Databricks とは? 本記事のシナリオ 必要なもの CData Salesforce…