データ移行の検証方法|件数・キー・変換後の値を照合する

データ移行の後に件数が一致していても、必要な行がすべて正しい値で移ったとは限りません。ある行の欠落と、別の行の重複が同時に起きれば、総件数は同じになることがあります。

検証では、同じ時点のデータを、対応するキーと変換ルールに沿って比べることが重要です。この記事では、企業のデータベースや業務システムの移行を想定し、照合の順序と結果の残し方を説明します。

件数が合っても移行の正しさは確定しない

まず、移行する表や期間、除外するデータを決め、件数を確認します。件数は確認の入口になりますが、内容の一致とは別です。

たとえば、架空の売上データが次の状態だったとします。単純化した説明用の例です。

移行元の注文IDと金額 移行先の注文IDと金額
A:100円 A:100円
B:200円 B:200円
C:300円 D:300円

両方とも3件、合計600円です。しかし注文Cがなく、移行元にはなかったDが存在します。件数と金額の合計だけでは、この違いを発見できません。

そのため、件数や合計に加え、どの行が対応しているかを確認します。実際の検証項目は、移行対象と業務上の重要度に合わせて決めます。

照合キーと同じ時点を先に決める

行を対応させるため、注文IDなど一意に識別できる項目を決めます。複数項目で識別する場合は、その組み合わせと重複の扱いを明記します。

AWS Database Migration Service(AWS DMS)は、移行元と移行先の対応する行を比較する検証機能を提供しています。公式資料では主キーまたは一意索引などの条件が説明されています。これはDMSの例であり、すべての移行ツールが同じ要件という意味ではありません。AWS DMSのデータ検証

移行時にIDを新しく割り当てるなら、旧IDと新IDの対応を残さなければ、そのまま同じキーで比べられません。対応表を使うのか、別の識別項目を使うのかを移行設計で決めます。

比較する時点もそろえます。移行元だけ更新が進んだ状態で比べると、差分が移行の誤りなのか、更新時刻の違いなのか判断しにくくなります。更新を止める時点や、差分反映の完了をどう確かめるかは、移行切替の準備と合わせて整理してください。

変換後に期待する値を定義する

移行元と移行先で形式が違う場合、値が同じかを見る前に、どのような変換を正しいとするかを決めます。たとえば、コードの置換、日付形式、空欄の扱い、金額の単位などです。

本記事では、検証項目ごとに次のような記録を作ることを勧めます。

項目 変換と確認の例
状態コード 旧コードと新コードの対応表どおりか
日付 決めた日時・タイムゾーンの扱いになっているか
金額 単位や丸めの規則を適用した結果か
未入力値 空文字とNULLをどう扱うと決めたか
関連するID 参照先となるデータと対応しているか

たとえば、仮の仕様で「旧状態1を新状態openへ変換する」と決めた場合、文字列が異なること自体は不一致ではありません。変換後の期待値と比較します。一方、変換表にない状態は、都合のよい値へ置き換えて検証済みにせず、扱いを決める必要があります。

集計値を使う場合も、集計対象の期間や状態をそろえます。違う条件で計算した合計を比べても、差の原因を特定しにくくなります。

不一致・未検証・対象外を分けて記録する

検証結果を成功と失敗の二つだけにすると、まだ比較していないデータが見えにくくなります。AWS DMSにも、検証待ち、不一致、検証できない状態などを区別する情報があります。また、検証のための追加照会は移行元・移行先へ負荷をかけると説明されています。AWS DMS「Replication task statistics」「Limitations」

プロジェクトの記録でも、次の区別を残すことを勧めます。

  • 一致:決めた範囲と条件で比較できた。
  • 不一致:比較できたが期待する値と異なる。
  • 未検証:待機中やエラーなどで、まだ結果がない。
  • 対象外:今回の方法では比較しない。理由と代わりの確認方法を残す。

不一致には対象のキー、項目、確認時刻、期待値、実際の値、対応担当を付けます。機密性のある値は、確認に必要な範囲で扱い、共有先に応じて記録方法を決めます。

全件照合が難しく一部を抽出するなら、抽出条件と未確認の範囲を明記します。一部の一致を、全データの一致として報告しないようにします。ツールが対応しない型や対象は、仕様を確認して別の検証方法を用意します。

切替判断には業務での確認も加える

データの照合が終わった後も、新システムで必要な業務を実行できるかを確認します。たとえば、対象の注文を検索し、明細を表示し、決めた条件で帳票を出せるかを試す方法が考えられます。

これは、データの一致と、業務として使えることを分けて判断するためです。件数が一致しても表示条件が誤っていれば、利用者は必要なデータを見つけられません。

切替の前には、不一致や未検証の残件、業務への影響、対応担当、再確認の条件を整理します。検証結果だけで自動的に移行完了とせず、あらかじめ決めた判断基準と照合します。

まず一つの重要な表について、照合キー、比較時点、変換ルール、未検証の扱いをそろえてください。システム開発・移行に関わる体制の相談は、システムエンジニアリングサービスをご確認いただけます。

記事一覧へ戻る

ITの困りごとを、
まずはご相談ください。

何から手をつけるか決まっていない段階でも構いません。ご相談内容に応じて、担当者からご連絡します。

まずは相談する

採用へのご応募は採用エントリーからお願いします。