詳しく見る
まずは、成果物から。
計画書・ケース一覧・レポートの形式を確認し、デモでチームのプロジェクトから同じ成果物を作ります。
レポートのサンプル 提供中
レポートに含まれるもの。
コマースWebのステージング実行#48は、45件通過・1件失敗でもCONDITIONALです。失敗が軽微で、Firefoxで結果が反転した1件が隔離され、要件カバレッジが目標80%に届かなかったためです。
- 結果:通過45 · 失敗1(軽微、決済金額の入力検証、Firefox)· 隔離1(注文一覧のページネーション、反転率25%)· スキップ1
- 検証範囲:要件76%(42件中32件、目標80%)· チェックリスト13/17 · 画面41/48
- 証拠:失敗ケースごとのスクリーンショット・再現動画・ログをJira QA-318に関連付け
- 再検証#49:通過47 · 隔離1(通過)· 要件83% · セキュリティ0件でPASS
計画とケースのサンプル 提供中
1つのケースに含まれるもの。
画面と要件から生成したケースを、手動作成と同じ形式で管理します。検証できない下書きは作り直し、重複を整理し、韓国語・英語・日本語に翻訳します。
- シナリオ · 前提条件 · 入力値 · 期待結果
- 優先度は4段階:低 · 通常 · 高 · 最優先
- 自動化レベルは3段階:手動 · 候補 · 自動化済み
- 出典:手動・文書・コード。PR提案には承認・却下の履歴を添付
ガイド
結果を読むための、4つのポイント。
初めてレポートを受け取った担当者が、よく確認するポイントです。
3段階のリリース判定
FAILは致命的・重大な失敗、CONDITIONALは軽微・低影響の失敗、隔離・判定保留、またはカバレッジ80%未満。PASSは、実行したすべての検証が初回で通過した場合です。
判定ルール3つの検証範囲
要件・チェックリスト・画面の3つの軸で、未確認の範囲を数えます。コードカバレッジではありません。ケースがあっても、実行していなければ検証済みにはなりません。
検証範囲0件と確認不可
コード・シークレットのスキャンが無効な場合は、0件ではなく確認不可と表示します。未確認の項目を通過にはしません。
セキュリティ検査隔離基準
直近20回で、同じコミットの結果の反転率が20%以上になると自動隔離します。隔離後も実行しますが、FAIL判定の原因にはしません。
検証の信頼性よくあるご質問
サンプルとガイドのよくある質問。
サンプルの判定は、なぜFAILではなくCONDITIONALなのですか?
製品ツアーは、どのように進みますか?
計画書とケース一覧のサンプルを、ファイルで受け取れますか?
ガイドは、どの順番で読むとよいですか?
チームのプロジェクトで、確かめましょう。
デモでは、チームのリポジトリと文書で計画書・ケース一覧・最初のレポートを作成します。検証業務を任せたい場合は、マネージドQAの相談へ進めます。
sales@qoretix.com+82-33-242-0210平日 10:00–18:00 KST