基幹連携・データ移行読了約15分

システム連携はリアルタイムか夜間バッチか|業務の許容遅れで決める表

連携の反映タイミングを、業務が耐えられる遅れから決める判断表です。

記事の概要図

開発会社から届いた見積書に、連携の項目が2通りあった。「受注データの即時連携(リアルタイム)」が1行、「会計への夜間一括連携(バッチ)」が1行。リアルタイムの方が、金額が大きい。担当のあなたは、どちらも「システムがつながる」ことに変わりはないと思っていた。しかし、営業から「在庫がすぐ反映されないと、売り越しが出る」と言われ、経理からは「会計は翌朝に反映されれば十分」と言われた。全部をリアルタイムにすれば安心なのか。それとも、費用がかさむだけなのか。

こんなことはないでしょうか。

この記事では、システムの連携で、データを「すぐ」反映するのか、「まとめて」反映するのかを、業務の側から決める方法を説明します。連携のタイミングの種類、公式の文書で確かめられる遅れの実例、許容できる遅れの決め方、判断表、見積書で確認する点を、順に書きました。技術の細かい説明より、発注側が自分で決められる材料を優先しています。

この記事で分かること

  • 連携の4つのタイミング(通知・定期確認・夜間バッチ・手動)の違い
  • 業務ごとに、許容できる遅れを決める表と、方式の判断表
  • 通知と定期の照合を組み合わせる理由と、見積書で確認する項目

方式は、技術の好みではなく、業務が耐えられる遅れで決めます。遅れの許容は、連携ごとに違うため、一律にリアルタイムにすると、費用も運用の負担も増えます。

1. 連携の4つのタイミング

データを別のシステムに渡すタイミングは、おおよそ次の4つです。

通知型(リアルタイム)データが作られたとき、送る側が受ける側に知らせる(Webhookなど)数秒から数分在庫、決済、注文の受け付け受け側が常に受けられる状態でないと取りこぼす
定期確認型(ポーリング)受ける側が、一定の間隔で、新しいデータがないかを聞きに行く確認の間隔ぶん(1分〜数時間)通知の仕組みがない相手との連携間隔が短いほど、問い合わせの回数が増える
夜間バッチ1日の決まった時刻に、まとめて渡す最長で1日ほど会計、集計、レポート途中で失敗すると、翌日まで気づかない場合がある
手動(ファイル受け渡し)人がファイルを書き出し、取り込む人の作業の時間件数が少ない、月に数回の連携作業の漏れ、取り込み間違い

どの方式にも、向き不向きがあります。どれが優れているかではなく、どの業務に、どれが合うかを決めます。

連携の4つのタイミングと、反映の遅れの目安

2. 公式の文書で見る遅れの実例

遅れの大きさは、使うサービスの仕様で決まる部分があります。公式の文書から、実例を3つ挙げます。

定期確認型の間隔はプランで違う

Zapierのヘルプには、新しいデータを定期的に確認するトリガー(ポーリング)の間隔が、プランごとに書かれています。無料プランで15分ごと、Professionalプランで2分ごと、TeamプランとEnterpriseプランで1分ごとです。一方、アプリが新しいデータを作ったときにWebhookで知らせるインスタントトリガーには、固定の確認間隔がなく、データが作られるとすぐにZapが動くと説明されています。

同じヘルプには、トリガーの型はアプリのAPIで決まっていて、利用者が変更できないとも書かれています。つまり、連携するアプリによっては、「すぐ動かしたくても、定期確認しかできない」場合があるということです。

連携ツールの、プランごとの確認間隔プランによって、遅れが変わる
連携するアプリの、トリガーの型通知型か定期確認型かが、アプリ側で決まっている
間隔を短くするための費用プランの変更が必要になる場合がある

問い合わせが多すぎると、断られる

Shopifyの文書には、Admin APIのレート制限が説明されています。アプリごとに「バケット」という考え方があり、リクエストのたびにバケットに量が入り、一定の速さで空いていきます。バケットが満杯になると、スロットルのエラーが返り、容量が回復するまで待つ必要があります。

つまり、定期確認の間隔を短くしすぎる、あるいは一度に大量のデータを取り込もうとすると、相手のサービスから断られることがあります。この文書には、バケットの大きさや回復の速さの具体的な数字は載っていませんので、数字が必要なときは、各APIの制限のページを確かめます。

山があると、受け側が追いつかない

Stripeのドキュメントは、Webhookの配信が急増する場合について書いています。たとえば、すべてのサブスクリプションが更新される月初などです。受けたイベントを、非同期のキューで処理するようにすれば、システムが対応できる速さで、同時に起きたイベントを処理できると説明されています。また、タイムアウトを起こさないよう、複雑な処理の前に、成功の応答を素早く返すことも勧められています。

Shopifyの購読に関する文書にも、同じ方向の説明があります。受信した内容を保存して、非同期で処理すると、5秒以内の応答が作りやすいという内容です。

この3つの実例から、次のことが分かります。

  • 遅れの大きさは、方式だけでなく、プランやアプリの仕様でも決まる
  • 通知型でも、定期確認型でも、相手の制限や、自社の山に気をつける必要がある
  • リアルタイムは、受け側の設計(キューなど)に費用がかかることがある

ステップ1 許容できる遅れを決める

最初に、連携のそれぞれについて、「業務が耐えられる遅れ」を決めます。これは、システムの担当者ではなく、業務の担当者が決めます。

通販サイト→在庫注文による在庫の減り在庫担当売り越し、お客様へのお詫び数分
通販サイト→倉庫出荷の指示倉庫担当出荷の遅れ1〜2時間
決済→入金管理入金の通知経理入金の確認が遅れる半日
通販サイト→会計売上の計上経理月次の締めが遅れる翌営業日
顧客管理→メール配信配信リストの更新マーケティング退会した人にメールが届く1日以内

最後の行のように、遅れが「失礼」や「法令に関わる」問題になる場合があります。退会した人や、配信を止めてほしい人への配信は、遅れが少ない方が望ましい例です。業務の担当者に、「遅れると、何が困るか」を、具体的な場面で聞いてください。

聞き方のコツ

「どのくらいの遅れなら許せますか」とだけ聞くと、「すぐ」という答えが返ります。次のように、場面で聞きます。

  • 「注文が入ってから、倉庫の一覧に出るまで、1時間かかったら、困りますか」
  • 「困るとしたら、何が起きますか」
  • 「その場合、手で直せますか。何分かかりますか」

手で直せるなら、許容できる遅れは長くなります。手で直せないなら、短くなります。

ステップ2 データの量と山を調べる

次に、データの量と、集中する時期を調べます。方式を決める材料になります。

通販→倉庫120件セールの日通常の5倍セール、キャンペーン
決済→入金管理130件月初通常の2倍定期購入の更新
通販→会計120件月末通常と同じ締め処理

数字は、記入例のための架空のものです。自社の数字は、売上の一覧や、システムの管理画面で確かめます。

山の大きさは、次の点で効きます。

  • 通知型は、山のとき、受け側が処理しきれず、取りこぼすことがある(Stripeの文書が、急増に備えるよう勧めている点)
  • 定期確認型は、山のとき、1回の確認で多くを取りに行くため、相手の制限に当たることがある(Shopifyのレート制限)
  • 夜間バッチは、山のとき、処理が長くなり、翌朝の始業までに終わらないことがある

山の日にも、普段の方式のまま動くかを、開発会社に確認してください。

ステップ3 方式の判断表で決める

許容できる遅れと、山の大きさが分かったら、次の表で方式を選びます。

数分小〜中大きい(売り越しなど)通知型。定期の照合も組み合わせる
数分大(山が急)大きい通知型。受け側にキューを設ける
1〜2時間小〜中中定期確認型(10〜30分間隔)、または通知型
半日〜1日どれも小〜中夜間バッチ、または1日数回の定期処理
翌営業日以上どれも小夜間バッチ。件数が少なければ手動も可

この表は、考え方の目安です。実際の方式は、連携するサービスの仕様に左右されます。通知型を使いたくても、相手のサービスが通知の仕組みを持っていない場合は、定期確認型になります。

許容できる遅れから、連携の方式を選ぶ流れ

全部をリアルタイムにしない理由

リアルタイムは、遅れが少ない反面、次のような負担があります。

受け側の常時稼働受け側が止まっているときの扱いを決める必要がある
失敗の扱い失敗した1件ごとに、再試行や通知を設計する
重複と順序同じ通知が複数回届く、順序が入れ替わる可能性に備える
費用設計、テスト、運用の工数が増える

Stripeのドキュメントは、イベントが生成された順序で配信されることは保証されず、同じイベントを複数回受信する可能性があると書いています。Shopifyの文書にも、順序が保証されず、重複を検出する必要があるという説明があります。これらを受け止める設計は、夜間バッチより手間がかかります。

つまり、遅れが問題にならない連携まで、リアルタイムにする必要はありません。遅れが問題になる連携だけを、通知型にするのが、費用と運用の面で無理がありません。

ステップ4 通知と照合を組み合わせる

通知型を選んだ場合も、それだけで済ませません。Shopifyの文書は、Webhookだけに頼らず、定期的に、データを取得し直して照合する仕組みを組み合わせるよう勧めています。Webhookは、変更を繰り返し問い合わせる方法より効率のよい手段とされています。そのうえで、アプリはWebhookの受信だけに頼らず、冗長性のために照合の仕組みで定期的にデータを取得して一致させる、という説明です。

組み合わせの形を、表にします。

通知型通常の反映を、すぐ行う発生のたび取りこぼすことがある
定期の照合通知で漏れたものを、取り直す1時間ごと、または1日1回漏れを拾う
件数の突合(人)仕組みの見落としを、人が確かめる毎日、または毎週全体のずれを見つける

通知・定期の照合・件数の突合の3つの層

この3層があれば、通知が途切れても、数時間から1日以内に、漏れに気づけます。逆に、通知型だけで運用すると、漏れに数日間気づかない場合があります。

3. 見積書で確認する項目

見積書に、「リアルタイム連携」「バッチ連携」とだけ書かれている場合、次の点を確かめます。

反映の遅れ通常時の遅れは、どのくらいですか通常は1分以内。山のときは5分程度
山のときセールや月初のとき、遅れはどうなりますかキューで受ける。遅れは増えるが、取りこぼさない
失敗したとき失敗した分は、どう再実行されますか自動で3回。尽きたら通知
照合の仕組み通知の取りこぼしを、取り直す仕組みはありますか1日1回、前日分を取り直す
相手の制限相手のサービスの制限(回数など)は考慮されていますか間隔は10分。制限の範囲内
費用間隔を短くすると、費用はどう変わりますか1分間隔は、プランの変更が必要

反映の遅れが「リアルタイム」とだけ書かれていて、数字がない場合は、数字を書いてもらいます。リアルタイムの意味は、数秒のことも、数分のこともあります。

ノーコードの連携ツールで作る場合

小さな連携を、ZapierやMakeのようなツールで作る会社も多くあります。この場合は、自社で仕組みを作らない代わりに、ツールの仕様が、そのまま連携の性質になります。Zapierのヘルプによると、定期確認型のトリガーは、データのユニークIDを、以前に受け取ったIDと比べて、新しいかどうかを判断します。つまり、元のアプリが一意のIDを付けていないデータは、この判断に頼れません。

ツールで作る前に、次の点を確かめます。

トリガーが通知型か、定期確認型か遅れの大きさが変わる注文の作成は通知型、入金の確認は定期確認型
契約しているプラン定期確認の間隔が、プランで違う現在のプランは2分間隔
データに一意のIDがあるか新しいデータかどうかの判断に使われる注文番号がある
山のときの動き件数が多い日に、処理が追いつくかセールの日に試験で確かめる
管理する人作った担当者が辞めたとき、直せる人がいるか情報担当と、代わりの1人

このように、ツールで作る連携でも、遅れ、山、管理する人の3つを、表にして確かめることは変わりません。

4. あとで方式を変えるときの考え方

最初に選んだ方式が、業務に合わなくなることもあります。件数が増えたり、販売の仕方が変わったり、新しいサービスが加わったりするためです。変えやすい作りかどうかも、見積もりの段階で確かめておくと安心です。

夜間バッチを、通知型へ変える受け側を、常に受けられる状態にする必要がある受け側の設計を、あとから足せるか
通知型を、夜間バッチへ戻す反映が遅くなる。業務側の運用を変える遅れを許容する業務ルールを、決められるか
定期確認の間隔を短くする連携ツールのプランや、相手の制限に影響する間隔の変更が、設定だけで済むか
連携先のサービスを替える通知の仕組みや制限が変わる連携の部分を、入れ替えられる作りか

変更のしやすさは、「連携の部分が、業務の部分から切り離されているか」で決まります。開発会社に、方式を変えたい場合の作業の範囲を、先に聞いておいてください。たとえば、「通知型に変えたいと思ったとき、どの部分を作り直すことになりますか」と聞きます。答えが「全部」であれば、最初の方式選びを、慎重に行う必要があります。

試作で、小さく確かめる

方式に迷う場合は、小さな範囲で試します。たとえば、最初の1か月は、夜間バッチで始め、反映の遅れで困った場面を記録します。困った場面が、在庫の売り越しだけだとすれば、在庫の連携だけを通知型に変えます。全部を最初から決めきるより、記録に基づいて、必要な連携だけを手厚くする進め方が、費用の面でも無駄が出にくくなります。

遅れで困った日12月5日
困った内容在庫が反映される前に注文が入り、1件の欠品
手で直せたか直せた。お詫びの連絡に30分
起きた回数(1か月)3回
判断在庫の連携だけ、通知型へ変更を検討

回数と、直すのにかかった時間が分かれば、通知型にする費用との比較ができます。

5. 記入例|通販・倉庫・会計の連携

ここまでの表を使った、記入例です。架空の会社が、通販サイト、倉庫システム、会計ソフトをつなぐ場合です。

通販→在庫数分通知型1時間ごとに在庫を取り直す売り越しを防ぐ
通販→倉庫1〜2時間通知型(山はキューで受ける)毎日、注文数を突合セールの山に備える
決済→入金管理半日定期確認(30分ごと)毎週、入金額を突合通知の仕組みがない
通販→会計翌営業日夜間バッチ毎月、売上の合計を突合月次の締めに間に合えばよい

この表で、会計の連携を夜間バッチにしたことで、仕組みが単純になり、費用も抑えられます。在庫と倉庫には手をかけ、会計は軽くする、という配分です。

6. よくある失敗

  • 全部をリアルタイムにして、費用が増えた。 許容できる遅れが長い連携は、夜間バッチで足りる
  • 「リアルタイム」の数字を、確かめなかった。 通常時と山のときの遅れを、見積書に書いてもらう
  • 通知型だけにして、取りこぼしに数日気づかなかった。 定期の照合と、件数の突合を組み合わせる
  • 連携ツールのプランを、確認しなかった。 プランによって、確認間隔が違うことがある
  • 山の日を考えずに作った。 セールや月初の件数を、開発会社に伝える
  • 業務の担当者に聞かず、情報担当だけで決めた。 許容できる遅れは、業務の担当者が決める

まとめ

連携の方式は、業務ごとの許容できる遅れ、データの量と山、失敗したときの影響を表にして決めます。通知型、定期確認型、夜間バッチ、手動のうち、遅れが問題になる連携だけを通知型にし、通知型には定期の照合を組み合わせます。見積書の「リアルタイム」には、通常時と山のときの遅れの数字を書いてもらってください。

方式の選び方や、見積書の読み方に迷われたときは、業務の許容できる遅れの聞き取りから、一緒に進められます。

よくある質問

リアルタイム連携は、夜間バッチより必ず良いのですか。

そうとは限りません。リアルタイムは反映が早い反面、受け側が常に動いている必要があり、失敗したときの扱いも考えなければなりません。業務が耐えられる遅れが1日なら、夜間にまとめて処理する方が、仕組みも運用も単純で済む場合があります。

ZapierやMakeのようなツールでは、どのくらいの遅れが出ますか。

Zapierのヘルプによると、新しいデータを定期的に確認するポーリング型のトリガーは、無料プランで15分ごと、Professionalで2分ごと、TeamとEnterpriseで1分ごとです。アプリがWebhookで知らせるインスタントトリガーには、固定の確認間隔がなく、データが作られるとすぐに動きます。どちらの型かは、連携するアプリ側の仕組みで決まっており、変更できないと書かれています。

通知で受け取る方式にすれば、定期的な突合は要りませんか。

要ります。Shopifyの文書は、Webhookは常に配信が保証されるわけではないため、定期的にデータを取得し直す照合を組み合わせるよう勧めています。通知を受けるだけで済ませず、照合の仕組みを併用するのが前提です。

月初や月末にデータが集中する会社は、何に気をつけますか。

受け側が処理しきれず、取りこぼす点です。Stripeのドキュメントは、配信が急増する月初などに備え、受けたイベントを非同期のキューで処理するよう勧めています。山の大きさを、開発会社に伝えてください。

参照元・出典

FREE CONSULTATION

「うちの場合はどうか」から

記事の考え方を、そのままご自身の事業に当ててみたい方へ。アイデア段階でも、機能リストがある段階でも構いません。 2営業日以内に、担当者からメールでご返信します。営業のお電話はしません。相談は無料です。

運営:株式会社miitaso(会社概要)

RELATED