CHINZY / FDE・ロボット受入試験ハンドブック / 05
環境設定差の再現
同じ入力で設定を一つだけ変え、設定版と出力差を記録する。再現条件なしにモデル原因と決めない。
試験の準備
試験前にサンプル・版・担当を固定し、前後の証跡を開発外の担当が照合する。例の予算と閾値は試験用であり、本番条件は別途合意する。
対照サンプル
数値と識別子は試験例で、製品性能や契約条件ではありません。想定と違う場合は入力、版、条件を保存して再現してください。
| 入力例 | 期待する観察結果 |
|---|---|
corpus=V1; top_k=1; source_rank=2 | source_absent |
corpus=V1; top_k=3; source_rank=2 | source_present |
結果の記録方法
サンプルごとに別の行へ記録します。一件の合格を他の代わりにせず、実出力、証跡、環境版、判定を記入し、不明な結果は保留にします。
記録シートをダウンロード(CSV) ↓