バッチ処理とリアルタイム処理を選ぶときは、「新しい方式か」よりも、結果がいつまでに必要かを先に決めます。利用者へすぐ返す必要がある仕事と、確定したデータをまとめて確認する仕事では、適した構成が違います。
業務の待てる時間と、後から訂正する条件をそろえて比較することが大切です。この記事では、方式を選ぶ担当者に向けて、違いと併用の考え方を説明します。
まとめる単位と結果を返すタイミングが違う
バッチ処理はデータを一定のまとまりで扱います。一方、継続して届くデータを順次扱う方式にストリーム処理があります。AWSの公式説明でも、まとまりを扱うバッチと、継続的な流れを扱うストリームが比較されています。AWS「バッチ処理とストリーム処理の違い」
「リアルタイム」は、文脈によって求める応答時間が異なります。ここでは、業務で求める短い時間内に結果を利用する処理を指し、ゼロ遅延という意味では使いません。ストリーム処理を採っただけで、必要な時間内に必ず結果が届くという保証にもなりません。
方式の名称だけで合意せず、「操作から何秒以内」「翌営業日の開始まで」など、業務で確認できる条件へ置き換えます。
比較する前に業務条件を並べる
次の表は、方式選定で確認するための整理案です。どちらかを一律に優れているとするものではありません。
| 比較軸 | 確認する問い |
|---|---|
| 許容する遅れ | 結果が遅れると、誰のどの作業が止まるか |
| 確定条件 | 後から取消・追加・修正が届くか |
| データ量 | 平常時と集中時にどれだけ届くか |
| 障害時 | 遅れて処理してよいか、即時に代替が必要か |
| 確認方法 | 一件ごとか、期間集計で照合するか |
| 運用 | いつ、誰が異常を確認できるか |
「リアルタイムにしたい」という要望には、画面表示を速くしたい、通知を早めたい、集計の待ち時間を減らしたいなど、別の目的が含まれます。目的を分解してから構成を選びます。
即時の表示と後からの確定を分ける例
架空の受注管理を考えます。利用者は注文直後に受付結果を知りたい一方、管理担当者は、取消や訂正を反映した一日分の集計を確認したいとします。
この場合の検討案として、受付結果は短時間で返し、日次の確定集計はまとめて作る構成が考えられます。どちらか一方ですべてを処理する必要はありません。
ただし、速報と確定値を併用するなら、画面や帳票で区別する必要があります。たとえば「受付時点の件数」と「取消反映後の件数」を同じ名前で見せると、数字が違う理由を利用者が判断できません。
この例は説明用であり、特定企業の実績や構成の推奨ではありません。自社の訂正条件、データの責任者、許容する遅れを使って評価してください。
訂正・重複・再実行を試験に含める
方式を比べる試験では、正常なデータが一定の速度で届く場合だけでなく、遅延、重複、順序の入れ替わり、途中停止を含める案があります。
たとえば、同じ注文が二度届いたとき、売上を二重に数えないかを確認します。前日の取消が後から届いた場合には、どの期間の結果をどう訂正するかを確認します。
試験結果には、入力条件、期待値、実際の値、未確認の範囲を残してください。ある条件で速かったことを、すべての業務に適した方式だと一般化しないようにします。
運用と費用を含めて判断する
処理の速さだけでなく、障害を検知する方法、未処理のたまり方、復旧時の確認、担当者の作業も比べます。費用の比較では、同じデータ量と保存条件を使い、常時稼働する部分と実行時だけ使う部分を分けます。具体的な金額は採用するサービスと条件で確認します。
要件が曖昧なら、非機能要件の決め方を使い、まず許容する応答時間とデータの確定条件を文章にしてください。
その条件を使って小さく試し、業務と運用の両方から方式を決めましょう。開発体制についての相談は、システムエンジニアリングサービスをご覧いただけます。