← 記事一覧に戻る
テクノロジー

本番だけで起きるバグはテストデータで防ぐ

本番だけで起きるバグはテストデータで防ぐ

開発環境では動いたのに、本番にリリースした途端に画面が崩れる。こうした不具合の多くは、コードではなくテストデータの差が原因です。この記事はテスト工程の話として、本番に近いデータを用意する4つの観点と、匿名化した本番データの安全な使い方をまとめます。

なぜ「きれいなデータ」では足りないのか

開発環境のデータは、手で数件入れたものが大半です。名前は短く、住所は埋まっていて、件数は10件前後。本番の利用者は、そのどれにも当てはまりません。テストが通るのは「想定した入力」だけで、本番にだけ存在する入力は一度も試されていないのです。

本番相当データの4観点

1. 量

10件では見えない問題が、1万件で出ます。一覧の表示が遅い、ページ送りの境界で1件落ちる、検索のたびにタイムアウトする、といったものです。

  • 主要な一覧は本番の想定件数の1〜2倍を用意する
  • ページ送りの境界(ちょうど20件、21件)を必ず作る
  • 0件のときの表示も確認する

2. 分布の偏り

本番のデータは均等ではありません。少数の利用者が大量のデータを持ち、大半は少量です。均等に作ったテストデータでは、特定の利用者だけが遅い問題を再現できません。

  • 全体の1割の利用者が、データの大半を持つ状態を作る
  • 最長・最大のデータを意図的に1件混ぜる

3. 欠損値

必須ではない項目は、本番では空です。「null のはずがない」と書いたコードは、そこで落ちます。

  • 任意項目が空・null・空文字の3パターンを用意する
  • 画像やプロフィールが未設定の利用者を混ぜる

4. 古いフォーマットの混在

仕様変更を重ねた本番には、旧形式のデータが残っています。電話番号のハイフン有無、全角と半角、旧バージョンで保存した日付形式などです。新しい仕様だけで作ったデータでは、この混在は再現できません。

すぐ試せる:テストデータの生成例

手で作らず、4観点を決まりとして生成するスクリプトにします。以下は Ruby の例です。

users = 10_000.times.map do |i|
  {
    name: i % 50 == 0 ? "あ" * 200 : "ユーザー#{i}",
    phone: [nil, "", "03-1234-5678", "0312345678"].sample,
    posts_count: i < 1000 ? rand(500..5000) : rand(0..5)
  }
end

この例では、長い名前(極端な値)、空の電話番号と全角(欠損・混在)、上位1割に偏った件数(分布)を、1万件(量)の中に含めています。

匿名化した本番データを使うときの注意

本番のコピーが最も現実的ですが、そのまま持ち出してはいけません。

  1. 氏名・メール・電話・住所は、形式を保ったまま別の値に置き換える
  2. 置き換えは一貫させる(同じ人は常に同じ偽の値にする)。そうしないと関連データが壊れる
  3. 自由記述欄は個人情報が混ざるので、削除するか定型文にする
  4. 匿名化後のデータだけを開発環境に置き、元データは持ち込まない

よくある失敗

  • 匿名化でメールを全部同じ値にして、重複チェックのバグを見逃す
  • データを一度作って放置し、新しい項目が空のまま残る
  • テスト用アカウントだけがきれいなデータを持ち、本番との差に誰も気づかない

Bugoon での実践

それでも本番だけで起きる不具合は残ります。そのとき大切なのは、その瞬間の状況を逃さず残すことです。Bugoon のウィジェットを埋め込めば、報告者がスクリーンショットに注釈を付け、操作ステップと一緒に送れます。どのデータでそうなったのかを手がかりに、報告は GitHub Issue として登録され、カンバンボードで管理できます。見つかった本番固有のデータは、次回のテストデータの4観点に加えていきましょう。

チームのバグ報告を、もっとスムーズに。

Bugoon は無料で始められます。サイトにタグを 1 行追加するだけで、QA と開発の往復がなくなります。

無料で始める