CData Software Blog

クラウド連携のCData Software の技術ブログです。

CData Sync

サスケWorksのAPI をドライバー化:各種ツールから接続してみた

こんにちは。CData Software Japan テクニカルサポートエンジニアの菅原です。 本記事では、各種 Web API を ODBC / JDBC / ADO.NET といった標準のDB接続規格でアクセスできるようにするCData API Driverを用いて、サスケWorks の API を各種ツールから接続…

Syncの同期先にOracle Autonomous Databaseをご利用いただけるようになりました!

こんにちは、CData Software Japanの大川です。今回は弊社Sync製品の同期先としてOracle Autonomous Databaseを利用する方法について紹介します。 はじめに 必要なDLL・ライブラリの入手およびインストール Windows (.NET) 版Syncをご利用の場合 Syncをイン…

Google Cloud Storage(GCS)へのレプリケーション方法について:CData Sync

こんにちは、テクニカルサポートエンジニアの宮本です。 最近、S3やGCSへのレプリケーションはサポートしていますか?という問合せをいくつか受けました。 よく弊社技術ブログでは、RDB 系か BigQuery へのレプリケーションする構成が多めではありますが、ち…

CData Sync ハンズオン資料:MySQL to BigQuery

はじめに 本資料は、CData Software Japanのハンズオン向けの資料です。本ドキュメントをもとに実機にCData Sync製品をインストールして手順に沿って操作する事で、Salesforceなどのクラウドサービスのデータやデータベースに格納されているデータをCSVファ…

ログベースによる変更データキャプチャ(CDC)で PostgreSQL → BigQuery のレプリケーションをやってみた:CData Sync

こんにちは、テクニカルサポートの宮本です! 最近、Debezium などの変更データキャプチャに特化した SaaS がいくつか提供されていたりと、Change Data Capture(CDC)というワードを見かける機会が増えてきたなと個人的に感じています。 Change Data Captur…

PORTERS(旧HRBC)のデータをCData Sync を使ってAzure SQL にレプリケーションする

こんにちは。マーケティング担当の對馬です。 本記事では、人材管理システムである『PORTERS(旧HRBC)』のデータをAzure SQL にレプリケートする方法をご紹介します。 PORTERS のような人材データと他のシステムデータをマージして、分析したいというお話を…

クラウド会計freee データをCData Sync でSnowflake にレプリケートする

こんにちは。マーケティング担当の對馬です。 本記事では、クラウド会計サービスのfreee のデータをSnowflake にレプリケートする方法をご紹介します。 企業データをDWH にまとめ、BI での可視化や分析、機械学習などでの活用をしたいという要望が多くありま…

Amazon Redshift Serverless に Salesforce のデータをレプリケーションしてみる:CData Sync

こんにちは。CData Software Japan リードエンジニアの杉本です。 AWS で提供されているDWHサービスである「Amazon Redshift」のサーバーレス版、「Amazon Redshift Serverless」が去年の年末に発表されましたね。 aws.amazon.com 今までのAmazon Redshift …

インフルエンサーのTwitterフォロワー数の推移をデータポータルで可視化!Twitter×CDataSync×BigQuery×データポータル

こんにちは、テクニカルサポートエンジニアの宮本です! 1日1回は何かしらの SNS でインフルエンサーが発信している情報を見る機会はないでしょうか?最近はインフルエンサーを使ったインフルエンサーマーケティングというのもあるようで、マーケティング手…

CData Sync でクラウド請求書作成ソフト「board」データをAzure SQL へレプリケーションする

こんにちは。マーケティング担当の對馬です。本記事ではクラウド請求書管理システム「board」のデータをAzure SQL Database に連携する方法をご紹介します。 さまざまなSaaS データをデータベースにまとめて溜めておきたいというお話をいただき、本記事を作…

コロナ禍でのオフラインイベント Japan IT Week 2022 春!!🌸

Japan IT Week 2022 春 に行って来ました!! こんにちは!今年2月に入社しました、インサイドセールス 小野です! 今回、入社してはじめてオフラインのイベントに参加してきました! コロナ対策をしながら賑わう東京ビッグサイトでのIT 展示会!39,173名も…

CData SyncでMicrosoft 365の予定表データをPostgreSQLに同期してみる

こんにちは、CData Software Japanテクニカルサポートの大川です。 本記事では、CData SyncでMicrosoft 365の予定表データをPostgreSQLに同期する方法についてご紹介します。 はじめに 事前準備 必要なソフトウェアのダウンロード ダウンロードしたソフトウ…

STORES予約で管理している予約情報をBigQuery に同期してみる:CData Sync

こんにちは、テクニカルサポートエンジニアの宮本です! 今回は STORES予約で管理している予約情報を、ETL/ELT ツールの CData Sync を使って Cloud データウェアハウスの BigQuery に同期する方法をご紹介します。 STORES予約とは stores.jp STORES予約は 2…

CData Sync から LINE WORKS API 2.0 に接続してカレンダーに登録している予定情報をDBに同期してみた

こんにちは、テクニカルサポートの宮本です。 本記事では LINE WORKS の API 2.0 に CData Sync を使用して、自分のカレンダーに登録した予定情報を DB に連携する方法をご紹介します。 LINE WORKS とは LINE WORKS は 皆さんおなじみのLINEと同じ使い勝手で…

CData Sync のクラスタリング機能でSalesforceとMarketoのデータを同時にBigQueryに取り込んでみた

こんにちは、テクニカルサポートエンジニアの宮本です。 今回は CData Sync のクラスタリング機能について紹介したいと思います。 CData Sync のクラスタリング機能 CData Sync に去年追加されたこの機能ですが、名前の通り複数インスタンスでCData Sync を…

変更データキャプチャ(CDC)を使ったデータレプリケーションを SQL Server → Redshift でやってみた:CData Sync

こんにちは、テクニカルサポートエンジニアの宮本です。 少し前に CData Sync で変更データキャプチャ(CDC)を使ったレプリケーション機能がリリースされました。 www.cdata.com これにより、RDB をデータソースとしたジョブでも簡単に差分データの抽出が可…

コラボフローで申請中のドキュメントの中身を定期的に抽出してDB に同期する:CData Sync

こんにちは、テクニカルサポートエンジニアの宮本です。 今回は先日対応した全メンバーの申請書を取得する機能を使って、ドキュメントに入力した内容を定期的に DB に同期する方法をご紹介します。 シナリオ コラボフロー上では注文書や請求書、経費精算書、…

ログファイルをS3などにアーカイブできる機能が追加されました:CData Sync

こんにちは、テクニカルサポートエンジニアの宮本です。 前回はログ手動削除機能についてご紹介しましたが、今回もログ関連でログアーカイブ機能についてご紹介します。 ※ログ手動削除機能について www.cdatablog.jp ログアーカイブ機能とは 前回ご紹介した…

画面上から保存期間を過ぎたログファイルをアドホックに削除できるようになりました:CData Sync

こんにちは、テクニカルサポートの宮本です。 今回は CData Sync にひっそり追加されていたログ削除機能なんですが、画面上から保存期間を過ぎたログファイルをアドホックに削除することができるようになりましたのでご紹介します。 今回の機能によりできる…

Salesforce のリードデータをDWHのYellowbrick Dataにレプリケート:CDataSync

こんにちは!テクニカルサポートエンジニアの宮本です! 皆さんは Yellowbrick Data というサービスをご存知でしょうか? この Yellowbrick Data は次世代のフラッシュストレージに最適化されたデータウェアハウスということで、USの記事などを見るとこれま…

Yahoo! 広告のデータを BigQuery にスナップショットとして定期的にレプリケート:CData Sync

こんにちは、テクニカルサポートエンジニアの宮本です。 今回は Yahoo! 広告のデータを定期的に BigQuery にレプリケートして、ジョブ実行時のデータをスナップショットとして保持する方法をご紹介します。 Yahoo! 広告とは? Yahoo! Japanが提供するWeb広告…

仙台人の心をワシ掴みにしている仙台セリ鍋に学ぶCData Sync の話

メリークリスマス! CData Japan の疋田です。 本記事はCData Advent Calendar 2021 の25日目の記事です。 Calendar for CData Software | Advent Calendar 2021 - Qiita CData Software は日本本社が仙台にあります。冬の仙台といえば、定禅寺通りの光のペ…

400種類以上のAPI連携を開発・サポートしているデータパイプラインツール CData Sync の中身

こんにちは。CData Software Japan リードエンジニアの杉本です。 みなさんAPI連携されていますか? あるレポートによると昨今一つの企業が利用している平均のSaaSの数が80にもなっているらしいですね。これだけ様々なサービスにビジネスデータが散在してい…

デフォルト指定されたデータ型を変更して同期先DBにレプリケートする方法:CDataSync

こんにちは、テクニカルサポートエンジニアの宮本です。 今回はCDataSync のちょっとした Tips をご紹介します。 「CDataSync上で決め打ちされたデータ型を変更することはできないのか?」と、たまに受けるのですが、これ実はできます。 基本的には CData Sy…

CData スマレジ Driver・CData Sync でAPI制約に基づいて範囲指定を行う方法

こんにちは。CData Software Japan リードエンジニアの杉本です。 すでにスマレジAPIをご利用中の方であれば、ご存知かとは思いますが、現在いくつかのテーブルでデータを取得する際のクエリ制限がアップデートの中で追加されています。 詳しい対応内容につ…

JJUG CCC 2021 Fall にスポンサーとしてセッション登壇&出展します!

こんにちは。CData Software Japan リードエンジニアの杉本です。 毎年春と秋に開催されるJJUG CCC、今年もCData Software Japan はセッションスポンサーとして協賛させていただきます! セッションだけでなく、なにやらオンラインブースもあるみたいですね…

CData Software Advent Calendar 2021 を公開しました!& 今年は協賛もしています。

こんにちは。CData Software Japan リードエンジニアの杉本です。 気がつけばもう11月に入ってしまい、今年も残すところあと2ヶ月になってしまいました。 そして年末が近づくと今年もAdvent Calendarの季節がやってきたな!と思いますね。 今年もCData では…

CData Sync の処理結果を MS Teams に通知する

こんにちは。CData Software Japan リードエンジニアの杉本です。 前回の記事で CData Sync のジョブ結果を Slack に通知する方法を紹介しました。 www.cdatablog.jp 今回はこちらを使っている人も多いであろう Microsoft のコラボレーションツール Teams に…

CData Sync の処理結果を Slack に通知する

こんにちは。CData Software Japan リードエンジニアの杉本です。 データレプリケーションツールのCData Sync ではジョブ完了時にメールで通知する機能が搭載されています。 www.cdata.com cdn.cdata.com しかしながら、昨今ではMS Teams や Slack といった…

CData Sync でジョブの並列処理がサポートされました

こんにちは。CData Software Japan リードエンジニアの杉本です。 今回はCData Sync の新機能として、ジョブの並列処理がサポートされたので、お伝えしたいと思います! www.cdata.com 概要 CData Sync では一つのジョブの中で複数のテーブルのレプリケーシ…