本番だけで起きるバグはテストデータで防ぐ
開発環境では動いたのに、本番にリリースした途端に画面が崩れる。こうした不具合の多くは、コードではなくテストデータの差が原因です。この記事はテスト工程の話として、本番に近いデータを用意する4つの観点と、匿名化した本番データの安全な使い方をまとめます。
なぜ「きれいなデータ」では足りないのか
開発環境のデータは、手で数件入れたものが大半です。名前は短く、住所は埋まっていて、件数は10件前後。本番の利用者は、そのどれにも当てはまりません。テストが通るのは「想定した入力」だけで、本番にだけ存在する入力は一度も試されていないのです。
本番相当データの4観点
1. 量
10件では見えない問題が、1万件で出ます。一覧の表示が遅い、ページ送りの境界で1件落ちる、検索のたびにタイムアウトする、といったものです。
- 主要な一覧は本番の想定件数の1〜2倍を用意する
- ページ送りの境界(ちょうど20件、21件)を必ず作る
- 0件のときの表示も確認する
2. 分布の偏り
本番のデータは均等ではありません。少数の利用者が大量のデータを持ち、大半は少量です。均等に作ったテストデータでは、特定の利用者だけが遅い問題を再現できません。
- 全体の1割の利用者が、データの大半を持つ状態を作る
- 最長・最大のデータを意図的に1件混ぜる
3. 欠損値
必須ではない項目は、本番では空です。「null のはずがない」と書いたコードは、そこで落ちます。
- 任意項目が空・null・空文字の3パターンを用意する
- 画像やプロフィールが未設定の利用者を混ぜる
4. 古いフォーマットの混在
仕様変更を重ねた本番には、旧形式のデータが残っています。電話番号のハイフン有無、全角と半角、旧バージョンで保存した日付形式などです。新しい仕様だけで作ったデータでは、この混在は再現できません。
すぐ試せる:テストデータの生成例
手で作らず、4観点を決まりとして生成するスクリプトにします。以下は Ruby の例です。
users = 10_000.times.map do |i|
{
name: i % 50 == 0 ? "あ" * 200 : "ユーザー#{i}",
phone: [nil, "", "03-1234-5678", "0312345678"].sample,
posts_count: i < 1000 ? rand(500..5000) : rand(0..5)
}
endこの例では、長い名前(極端な値)、空の電話番号と全角(欠損・混在)、上位1割に偏った件数(分布)を、1万件(量)の中に含めています。
匿名化した本番データを使うときの注意
本番のコピーが最も現実的ですが、そのまま持ち出してはいけません。
- 氏名・メール・電話・住所は、形式を保ったまま別の値に置き換える
- 置き換えは一貫させる(同じ人は常に同じ偽の値にする)。そうしないと関連データが壊れる
- 自由記述欄は個人情報が混ざるので、削除するか定型文にする
- 匿名化後のデータだけを開発環境に置き、元データは持ち込まない
よくある失敗
- 匿名化でメールを全部同じ値にして、重複チェックのバグを見逃す
- データを一度作って放置し、新しい項目が空のまま残る
- テスト用アカウントだけがきれいなデータを持ち、本番との差に誰も気づかない
Bugoon での実践
それでも本番だけで起きる不具合は残ります。そのとき大切なのは、その瞬間の状況を逃さず残すことです。Bugoon のウィジェットを埋め込めば、報告者がスクリーンショットに注釈を付け、操作ステップと一緒に送れます。どのデータでそうなったのかを手がかりに、報告は GitHub Issue として登録され、カンバンボードで管理できます。見つかった本番固有のデータは、次回のテストデータの4観点に加えていきましょう。