開始する前にテスト条件を修正してください
参加者、ビジネス上の質問、参考回答、データのスナップショットについて同意します。製品とモデルのバージョン、展開環境、アクセス ID、データソースの範囲を記録します。自然言語による各質問を、そのビジネス上の意味とともに正確に保存し、テスト全体を通してターゲットの一貫性を保ちます。
どのエラーが起動を妨げるか、どの違いが許容されるかを事前に合意してください。金額に対して指定した丸め許容範囲を許可することもできます。不正な開示、不正確な期間、または欠落データを事実として扱う場合は、通常、別個の処理が必要です。両方のプロジェクトチームが実際のしきい値を設定します。
システムが応答できないケースも含める
| テストカテゴリー | 何を観察すべきか |
|---|---|
| 日常的な質問 | 正確さ、単位、時代、出典 |
| 追加の質問 | 条件は保持され、変更は明示的に要求されます |
| データが欠落しています | ギャップと次のステップの正確な説明 |
| 範囲外のアクセス | 許可されていないコンテンツの開示禁止 |
| 時代遅れの資料 | バージョンと鮮度の制限の認識 |
| レポートのエクスポート | 開いて参照を確認できる完全なファイル |
各質問の受諾記録を保管する
- 質問番号、文言、テストの内容、入力範囲、合意された期待値を記録します。
- 生の出力とサポートソースを最終スクリーンショットと一緒に保持します。
- 開始時刻と終了時刻を記録します。クエリ、キャッシュ、生成の各段階を区別します。
- 各テストを合格、部分合格、または不合格としてマークします。相違点と再テストの条件について説明します。
- 構成、定義、またはバージョンを変更した後、同じ質問を再実行し、両方の結果セットを保持します。
調査結果を使用して発売の決定を下す
短いライブデモンストレーションは、インタラクションと検証可能性を確認するのに適しています。起動に必要なデータのクリーニング、統合、またはセキュリティ評価のすべてをカバーしているわけではありません。パイロット結果に対して所有者、範囲、および受け入れ基準を割り当ててから、回復、アクセス取り消し、および例外処理をテストします。
このテストで確認できた用途、人による確認が必要なケース、テストの対象外だった機能を短くまとめます。漠然とした好印象を残すより、何が基準を満たしたかを記録するほうが、次のチームの検討に役立ちます。
このガイドは役に立ちましたか?
