CHINZY / FDE・ロボット受入試験ハンドブック / 05
FDE試験導入と運用引継ぎ
試験前にサンプル・版・担当を固定し、前後の証跡を開発外の担当が照合する。例の予算と閾値は試験用であり、本番条件は別途合意する。
検証項目
01
受入試験用データの分離
調整前に評価用IDとハッシュを固定し、同一案件の類似版が両集合にまたがらないよう照合する。
02手作業基準との対比較
同じ匿名化課題を手作業と支援付きで実施し、課題IDごとに確認作業を含む総時間を比べる。
03段階公開の停止条件
隔離トラフィックで停止条件を決め、該当エラーを模擬する。新規処理が旧版に戻り、既存記録が残ることを確認する。
04復元と再生の照合
隔離コピーのみに復元し、スナップショット後の差分を業務IDで照合する。欠落・重複と確認できた最終時点を残す。
05ログのマスキング回帰試験
架空マーカーで正常系・異常系を実行し、ログ・トレース・エクスポートを検査する。実顧客の情報は使わない。
06タスク予算を使い切った時の処理
模擬計量器で小さな上限を設定し、上限到達時の待機ステップと説明を確認する。有料呼出しは不要。
07環境設定差の再現
同じ入力で設定を一つだけ変え、設定版と出力差を記録する。再現条件なしにモデル原因と決めない。
08運用引継ぎの単独再現
開発外の担当者が手順書だけで試験環境を復旧し、詰まった手順・権限担当・確認結果を記録して再試行する。