CData Software Blog

クラウド連携のCData Software の技術ブログです。

CData Sync

仙台人の心をワシ掴みにしている仙台セリ鍋に学ぶCData Sync の話

メリークリスマス! CData Japan の疋田です。 本記事はCData Advent Calendar 2021 の25日目の記事です。 Calendar for CData Software | Advent Calendar 2021 - Qiita CData Software は日本本社が仙台にあります。冬の仙台といえば、定禅寺通りの光のペ…

400種類以上のAPI連携を開発・サポートしているデータパイプラインツール CData Sync の中身

こんにちは。CData Software Japan リードエンジニアの杉本です。 みなさんAPI連携されていますか? あるレポートによると昨今一つの企業が利用している平均のSaaSの数が80にもなっているらしいですね。これだけ様々なサービスにビジネスデータが散在してい…

デフォルト指定されたデータ型を変更して同期先DBにレプリケートする方法:CDataSync

こんにちは、テクニカルサポートエンジニアの宮本です。 今回はCDataSync のちょっとした Tips をご紹介します。 「CDataSync上で決め打ちされたデータ型を変更することはできないのか?」と、たまに受けるのですが、これ実はできます。 基本的には CData Sy…

CData スマレジ Driver・CData Sync でAPI制約に基づいて範囲指定を行う方法

こんにちは。CData Software Japan リードエンジニアの杉本です。 すでにスマレジAPIをご利用中の方であれば、ご存知かとは思いますが、現在いくつかのテーブルでデータを取得する際のクエリ制限がアップデートの中で追加されています。 詳しい対応内容につ…

JJUG CCC 2021 Fall にスポンサーとしてセッション登壇&出展します!

こんにちは。CData Software Japan リードエンジニアの杉本です。 毎年春と秋に開催されるJJUG CCC、今年もCData Software Japan はセッションスポンサーとして協賛させていただきます! セッションだけでなく、なにやらオンラインブースもあるみたいですね…

CData Software Advent Calendar 2021 を公開しました!& 今年は協賛もしています。

こんにちは。CData Software Japan リードエンジニアの杉本です。 気がつけばもう11月に入ってしまい、今年も残すところあと2ヶ月になってしまいました。 そして年末が近づくと今年もAdvent Calendarの季節がやってきたな!と思いますね。 今年もCData では…

CData Sync の処理結果を MS Teams に通知する

こんにちは。CData Software Japan リードエンジニアの杉本です。 前回の記事で CData Sync のジョブ結果を Slack に通知する方法を紹介しました。 www.cdatablog.jp 今回はこちらを使っている人も多いであろう Microsoft のコラボレーションツール Teams に…

CData Sync の処理結果を Slack に通知する

こんにちは。CData Software Japan リードエンジニアの杉本です。 データレプリケーションツールのCData Sync ではジョブ完了時にメールで通知する機能が搭載されています。 www.cdata.com cdn.cdata.com しかしながら、昨今ではMS Teams や Slack といった…

CData Sync でジョブの並列処理がサポートされました

こんにちは。CData Software Japan リードエンジニアの杉本です。 今回はCData Sync の新機能として、ジョブの並列処理がサポートされたので、お伝えしたいと思います! www.cdata.com 概要 CData Sync では一つのジョブの中で複数のテーブルのレプリケーシ…

CData Sync Amazon S3 Destination が Parquet フォーマットをサポート

こんにちは。CData Software Japan リードエンジニアの杉本です。 以前、CData Sync の Amazon S3 Destination 機能について紹介したのですが、 www.cdatablog.jp www.cdatablog.jp 今回は新しく追加された機能、Parquetフォーマットのサポートを紹介したい…

ジョブ同士をつなげて、前のジョブ結果で別ジョブの実行有無を制御する方法:CData Sync

こんにちは!テクニカルサポートエンジニアの宮本です! 今回は CData Sync のジョブ同士をシリアルにつなげる方法を試していきます。 というのも、Sync のジョブはそれぞれが独立されているため、他のジョブ結果を待たずにスケジュールされた時間で実行され…

Apache Cassandra に Salesforce のデータを取り込む方法:CDataSync

こんにちは。CData Software Japan リードエンジニアの杉本です。 前回の記事で DataStax に構成した Apache Cassandra にCData Driver から接続する方法を紹介しました。 www.cdatablog.jp ただ、Cassandra のユースケースを考えると、以下のユースケースの…

freee 受発注 API をドライバー化:各種ツールから接続してみた

こんにちは。CData Software Japanリードエンジニアの杉本です。 本記事では、各種 Web API を ODBC / JDBC / ADO.NET といった標準のDB接続規格でアクセスできるようにするCData API Driverを用いて、freee スマート受発注 の API を各種ツールから接続する…

freee 人事労務 API をドライバー化:各種ツールから接続してみた

こんにちは。CData Software Japanリードエンジニアの杉本です。 本記事では、各種 Web API を ODBC / JDBC / ADO.NET といった標準のDB接続規格でアクセスできるようにするCData API Driverを用いて、freee 人事労務 の API を各種ツールから接続する方法を…

クラウド人事労務ソフトSmartHRのデータをCData SyncでSQL Serverに複製する方法

こんにちは。CData Software Japanテクニカルサポートエンジニアの菅原です。 クラウド人事労務ソフトで有名なSmartHRを導入している会社の方は多いのではないでしょうか。 従業員データをSmartHRで一元管理していて、自社内でのカスタムアプリ(業務アプリ…

クラウド会計 freee の API をドライバー化:各種ツールから接続してみた

こんにちは。CData Software Japanリードエンジニアの杉本です。 本記事では、各種 Web API を ODBC / JDBC / ADO.NET といった標準のDB接続規格でアクセスできるようにするCData API Driverを用いて、会計 freee の API を各種ツールから接続する方法を紹介…

クラウド勤怠管理システムKING OF TIMEのデータをCData SyncでMySQLに複製またはAmazon S3へCSV出力する方法

こんにちは。CData Software Japanテクニカルサポートエンジニアの菅原です。 今回はCData Syncを使って、クラウド勤怠管理システムKING OF TIMEのデータをMySQLへ複製する方法やAmazon S3へCSV出力する方法を紹介します。 KING OF TIMEとは? 手順(KING OF…

BigQuery に Google アナリティクス(ユニバーサル アナリティクス)のデータを連携する

こんにちは、テクニカルサポートエンジニアの宮本です! 最近 G4という次世代のGoogle アナリティクスがリリースされ、徐々に使用されている方も増えてきているのではないでしょうか? G4のトピックの一つとして、無償で BigQuery にデータを連携できる機…

CData Sync Amazon S3 Destination が相対パスによるレプリケーションをサポートしました

こんにちは。CData Software Japan リードエンジニアの杉本です。 この前このBlogで紹介したCData Sync の Amazon S3 Destination 連携ですが、今回新しい機能が追加されたので紹介したいと思います。 www.cdatablog.jp 通常Amazon S3 Destination は「Bucke…

CData Sync Amazon S3 Destination の使い方

こんにちは。CData Software Japan リードエンジニアの杉本です。 今回は CDataSync の連携先の一つとしてよくご相談をいただく、Amaozn S3 Destination の使い方を解説したいと思います。 Amazon S3 Destination とは? 利用手順 CData Sync のセットアップ…

あなたの業務にピッタリな、ベストETL ツールの選び方

こんにちは、CData Software Japan ローカライザの加藤です。ビッグデータの時代には、日々さまざまなソースから取得する大量のデータを効率よく一カ所に集約して、業務や分析に活かすETL ツールが欠かせません。でもETL ツールは本当に数が多くて、どれをど…

ジョブカン経費精算 の API をドライバー化:各種ツールから接続してみた

こんにちは。CData Software Japanリードエンジニアの杉本です。 本記事では、各種 Web API を ODBC / JDBC / ADO.NET といった標準のDB接続規格でアクセスできるようにするCData API Driverを用いて、ジョブカン経費精算 の API を各種ツールから接続する方…

V21 CData Marketo Driver・Sync で30種類を超えるテーブル・ビューを追加サポート

こんにちは。CData Software Japanリードエンジニアの杉本です。 今回はV21 で大幅にアップデートされたMarketo Driver の新機能を紹介したいと思います! www.cdata.com テーブル・ビューを新しく32種類追加 V21では、なんとCustomActivitiesやSmartLists、…

ナレッジ共有ツール NotePM の API をドライバー化:各種ツールから接続してみた

こんにちは。CData Software Japanリードエンジニアの杉本です。 本記事では、各種 Web API を ODBC / JDBC / ADO.NET といった標準のDB接続規格でアクセスできるようにするCData API Driverを用いて、ナレッジ共有ツール NotePM の API を各種ツールから接…

CDataSync V21 へのアップデート方法と初期設定

こんにちは、テクニカルサポートエンジニアの宮本(@miyamon44)です。 今回はCData Sync V20 から CData Sync V21 へのアップデート方法をご紹介します。 アップデート前に設定情報のバックアップ .NET 版のインストール Java 版のインストール ①内包されてい…

OracleのFlashback機能による差分更新をサポートしました:CData Sync

ついにOracle OCI データソースで差分更新が可能になりました! CData Sync の差分更新とは、データの同期時にデータソースで変更があったレコードのみをコピーする機能です。 同期するデータ量が膨大だと一度の同期に長い時間がかかりますが、差分更新機能…

SQLServerのChangeTracking 機能による差分更新をサポートしました:CData Sync

こんにちは、テクニカルサポートエンジニアの宮本(@miyamon44)です。 CData Sync の2021年バージョンでは大きな機能追加がいくつかあり、今回は SQLServer の Change Tracking 機能による差分更新方法についてご紹介していきます。 www.cdata.com Change Tra…

Garoon の予定データをユーザー指定・横断で取得する機能が追加されました:CData Garoon Driver

こんにちは。CData Software Japanリードエンジニアの杉本です。 今回はCData Garoon Driverで新しく追加された機能である「予定」データのユーザー指定、ユーザー横断で取得する機能を紹介したいと思います。 www.cdata.com なお、この機能はすべてのテクノ…

CDataSync のデータソースとして S-JIS形式の CSV ファイルを読み取る方法

こんにちは。CData Software Japanリードエンジニアの杉本です。 今回はCDataSyncでCSVデータの取り込みを行う場合によく質問を頂く、S-JIS形式ファイルへの対応の方法について解説したいと思います。 www.cdata.com 対象のファイル 対象のファイルは内閣府…

CData Syncから踏み台のSSHサーバー経由でRDS for PostgreSQL に連携する方法

こんにちは、テクニカルサポートエンジニアの宮本(@miyamon44)です。 今回は VPC 内の SSH サーバーからのみアクセス可能な AWS RDS for PostgreSQL に 、外部ネットワークにある ETL/ELT ツールの CData Sync から接続してSaaS データをレプリケートしてみ…