無影響確認測試(patch-regression-test)
1. 概要與前提
1.1 目的
在套用修補程式或修正後,確認應用程式的既有功能是否保持不變(無影響確認)。為此,找出目標應用程式中缺少的測試並加以實作,比較修補前後的結果,將結果彙整成報告並張貼至 Issue。
此技能用於指南中的以下三種場景:
- 緊急應對。 回應其他流程提出的緊急 CVE 修補程式無影響確認,並在期限內完成。
- 平時的恆久準備。 診斷應用程式的準備等級,預先補齊缺少的測試(首次與後續執行方式相同)。
- 計畫性的檢查。 在首次平時的恆久準備之後,針對外部工具或人員進行的修正(相依性更新、漏洞修復、原始碼修正)進行無影響確認。
1.2 指南與技術標準
- 開始作業前,務必閱讀以下兩份文件:
references/guideline.md(以下簡稱「指南」):說明應滿足的項目(分類、合格條件、角色、判定規則)references/standards.md(以下簡稱「技術標準」):說明如何滿足(工具、確認方法、測量方式、檔案名稱)
- 判斷基準遵循指南,執行方式遵循技術標準。若此技能、技術標準或指南的描述有所出入,以指南為優先。
- 術語(確認範圍、平時的恆久準備、計畫性的檢查、功能測試、呼叫位置、不穩定的測試、暫定合格等)均依循指南「1.5:術語」之定義。
- 在目標儲存庫中,此技能應置於
.github/skills/patch-regression-test/(GitHub Copilot 與 Devin 均可讀取的位置)。
1.3 此技能執行的項目
- 分析目標應用程式(語言、應用程式類型、現有測試與 CI、呼叫位置)
- 診斷準備等級(指南「3.1.1:準備等級」)
- 建立確認範圍判定草案(指南「第二章:修補程式的分類與確認基準」)
- 找出缺少的測試
- 實作測試程式碼。導入執行測試所需的函式庫時,需取得使用者許可
- 執行測試,並比較修補前後的結果(執行指令前需說明內容)
- 輸出無影響確認測試報告,並作為評論張貼至 Issue(若有 PR,亦於 PR 評論 Issue 連結)
- 若無觸發的 Issue,則建立 Issue(需取得許可)
- 記錄負責人的核准(比對 PR 核准狀態,並作為 Issue 的評論留存)
1.4 此技能不執行的項目
即使使用者要求或取得許可,也不執行以下事項。會引導至負責的對象。
| 不執行的事項 | 負責對象 |
|---|---|
| 套用修補程式、修改應用程式原始碼(包含相依性版本更新、應對破壞性變更、漏洞修復、回應靜態程式碼分析建議、為撰寫測試而進行的修改) | Dependabot・Devin 等其他工具,或人員 |
| 設定應用程式執行環境(變更執行環境或中介軟體的安裝與設定)。不包含導入執行測試所需的函式庫 | 人員,或各團隊的 CI |
| 變更或新增 workflow | 各團隊(遵循另行規定的指南) |
| 提交(Commit)與推送(Push) | 呼叫此技能的工具,或人員 |
| 收集漏洞資訊、判斷是否需要緊急應對、執行靜態程式碼分析 | 其他流程 |
| 部署 | 各團隊既有的 CD |
| 確認範圍的確定、預期差異的核准、PR 的核准 | 開發團隊的負責人 |
| 效能不合格時的釋出判斷、超過期限的判斷 | 副理以上主管 |
| 系統停止或封鎖的判斷 | 另行規定的決策流程 |
1.5 成果物
| 成果物 | 存放位置 |
|---|---|
| 測試程式碼 | 配合目標應用程式既有測試的存放位置 |
| 呼叫位置一覽表 | 目標應用程式的 patch-regression-reports/call-sites.md |
| 不穩定測試一覽表 | 目標應用程式的 patch-regression-reports/flaky-tests.md |
| 無對話執行設定檔 | 目標應用程式的 patch-regression-reports/auto-settings.md |
| 無影響確認測試實施報告 | 目標應用程式測試資源目錄下的 patch-regression-reports/ 內(名稱依循技術標準) |
| 報告的評論 | 觸發的 Issue。若涉及多個相關 Issue,則全部張貼(「9.4:張貼評論至 Issue 與 PR」) |
| 報告連結的評論 | 目標 PR(若有 PR 時) |
| 核准記錄的評論 | 觸發的 Issue(「第十章:核准記錄」) |
檔案需儲存至儲存庫內,提交動作則交由呼叫此技能的工具或人員負責。
1.6 作業流程
flowchart TD
S2[2. 啟動與場景] --> J0{場景}
J0 -- 核准記錄 --> S10[10. 核准記錄]
J0 -- 緊急應對・平時恆久準備・計畫性檢查 --> S3[3. 確認輸入資訊]
S3 --> S4[4. 分析目標應用程式]
S4 --> J{場景}
J -- 緊急應對・計畫性檢查 --> S5[5. 確認範圍判定草案]
J -- 平時恆久準備 --> S6[6. 找出缺少的測試]
S5 --> S6
S6 --> S7[7. 實作測試]
S7 --> S8[8. 執行與比較測試]
S8 --> S9[9. 輸出報告並張貼至 Issue]
1.7 等待使用者確認的位置
在以下位置,需提出草案與理由,等待使用者回應,收到回應前不得繼續。若為無對話執行(--auto),則依循「2.3:無對話執行(僅限計畫性檢查)」。
要求確認時,應一併詢問判斷者的姓名與角色(例如:開發團隊的負責人)。
- 確認場景與對象(CVE 編號・PR)、平時恆久準備的目標準備等級(「第二章:啟動與場景」)
- 儲存或更新設定檔(「2.3:無對話執行(僅限計畫性檢查)」)
- 處理資訊矛盾、缺少的輸入資訊(「3.3:狀態確認」・「3.4:處理缺少的資訊」)
- 應用程式類型(「4.2:應用程式類型」)
- 確認範圍判定草案、確認範圍 3 的目標項目、破壞性變更一覽表、測試目標的修正位置(「第五章:確認範圍判定草案」)
- 排除的測試等級、是否將 V9:並行處理與資源納入目標(「6.2:需向使用者確認的事項」)
- 實作範圍(「6.4:選擇實作範圍」)
- 新增執行測試所需的函式庫、無測試機制時的選擇工具(「7.1:實作原則」)
- 新增至不穩定測試一覽表(「7.2:依測試類型實作」・「8.4:失敗的釐清」)
- 安裝執行測試所需的函式庫、使用網路的漏洞掃描與靜態程式碼分析、是否在本機執行耗時較長的測試(「第八章:執行與比較測試」)
- 測試執行中發現的差異是否符合預期、更新預期值(「8.5:處理差異」)
- 建立 Issue、張貼評論至 Issue 與 PR(「9.4:張貼評論至 Issue 與 PR」)
2. 啟動與場景
2.1 啟動方式
透過啟動時的引數接收場景。
| 場景 | 引數範例 |
|---|---|
| 緊急應對 | urgent CVE-2026-12345(若同時處理多個 CVE,則使用 urgent CVE-2026-12345 CVE-2026-23456) |
| 平時恆久準備 | readiness |
| 計畫性檢查 | planned 123(123 為修正的 PR 編號。可省略) |
| 無對話執行計畫性檢查 | planned 123 --auto |
| 核准記錄 | approve 123(123 為 PR 編號) |
- 目標 PR。 在緊急應對、計畫性檢查、核准記錄中,前提是包含修補程式或修正的 PR 已在此技能啟動前建立(由 Dependabot・Devin 或人員建立)。
- 目標 Issue(張貼位置)。 張貼報告的 Issue 依場景識別如下。若涉及多個相關 Issue,則全部納入目標。
- 緊急應對:標題包含目標 CVE 編號的 Issue(指南「7.1:漏洞資訊與修補程式變更內容的存放位置」)
- 計畫性檢查:與 PR 關聯的 Issue。若無,則依標題規則(「定期偏離檢查」「靜態程式碼分析」)搜尋。若仍未找到則建立
- 平時恆久準備:無 Issue,故需建立
- 核准記錄:與 PR 關聯的 Issue
- 若無引數,則詢問使用者場景。
- 即使有引數,也需向使用者顯示接收到的場景與對象(CVE 編號・PR・張貼目標 Issue),並取得確認後再繼續。若為
--auto,則依循「2.3:無對話執行(僅限計畫性檢查)」。 - 計畫性檢查的 PR。 若 PR 編號省略,則使用
gh識別對應當前分支的 PR,向使用者顯示並取得確認。 --auto僅限計畫性檢查(planned)使用。 若在其他場景指定--auto,則告知無法使用,並切換為對話執行。
2.2 各場景的作業
| 場景 | 走過的章節 | 「第八章:執行與比較測試」中的動作 |
|---|---|---|
| 緊急應對 | 第 3 至 9 章 | 單獨執行新增的測試、比較修補前後、執行指南「2.4:所有確認範圍通用的測試」 |
| 平時恆久準備 | 第 3、4、6 至 9 章(不執行第 5 章) | 單獨執行新增的測試、執行指南「2.4:所有確認範圍通用的測試」中的 C1 至 C4(由於無比較對象與目標漏洞,不執行 C1 的相依樹比較與 C5、C7) |
| 計畫性檢查 | 第 3 至 9 章 | 單獨執行新增的測試、比較修正前後、執行指南「2.4:所有確認範圍通用的測試」 |
| 核准記錄 | 僅第 10 章 | 不執行 |
- 「修補程式」的替換。 在計畫性檢查中,此技能整體將「修補程式」替換為「修正」(例如:「修補前」替換為「修正前」)。
- 平時恆久準備的目標。 由使用者選擇要準備到哪個等級(例如:到 L2)。
- 緊急應對的時間可視化。 在「第三章:確認輸入資訊」確認緊急應對著手的請求時間(I12)後,立即顯示期限(部署至 Staging 為 24 小時,上線至正式環境為 48 小時,測試新增與執行預估為 12 小時)。此後,每完成一章,向使用者報告經過時間,並記錄於報告中。
- 若可能超過期限(緊急應對)。 不得省略確認。向使用者顯示可能超過期限,以及需要從開發團隊負責人往上呈報至副理以上主管,並記錄於報告的「需呈報事項」。
- 平時無期限。 在平時恆久準備與計畫性檢查中,不顯示期限,也不報告經過時間。且不使用暫定合格。
2.3 無對話執行(僅限計畫性檢查)
在計畫性檢查中,AI 開發工具可針對修正的 PR 無對話地執行此技能(planned <PR 編號> --auto)。不限制檢查類型(相依性更新、漏洞修復、原始碼修正)。
若以對話執行時需向人確認決定的事項,則記載於報告的「無對話執行時發現的需確認項目」一節(以下,本節簡稱「需確認」)。負責人在審查 PR 時,需處理張貼至 Issue 的報告中的「需確認」事項。
2.3.1 設定檔
- 無對話執行以設定檔
patch-regression-reports/auto-settings.md為前提。其模板為templates/auto-settings-template.md。 - 若 PR 變更了設定檔則中止。 若 PR 的檔案變更列表(例如:
git diff --name-only <比較基準分支>...HEAD)包含設定檔,則不開始作業並中止,告知需要對話執行後結束。這是為了防止 PR 本身能變更許可範圍。 - 儲存。 當對話執行平時恆久準備或計畫性檢查時,最後將使用者的回答彙整至設定檔。儲存前,向使用者顯示內容並取得確認後再儲存。對於當下未詢問的項目,不進行推測,而是詢問使用者。若已有設定檔,則顯示變更點並取得更新確認。
- 若無設定檔或格式不正確。 無法使用
--auto。不開始作業並中止,告知原因後結束。 --auto不更新設定檔。 若發現應變更設定的項目,則記載於「需確認」。
2.3.2 處理確認位置
當使用 --auto 時,在「1.7:等待使用者確認的位置」中,不詢問使用者,而是依以下方式處理。
| 確認位置 | 無對話時的處理方式 |
|---|---|
| 場景與目標 PR | 視為計畫性檢查處理。PR 使用引數的編號。若無編號則中止 |
| 儲存或更新設定檔 | 不執行。需變更的項目記載於「需確認」 |
| 指令說明 | 無需說明的對象,因此將執行的指令與其內容記錄於報告 |
| 資訊矛盾 | 記載於「需確認」,並依據儲存庫內容繼續進行 |
| 缺少的輸入資訊 | 記錄為殘留風險 |
| 應用程式類型 | 使用設定檔的值。若與從原始碼推測的結果不一致,則記載於「需確認」,並以設定檔的值繼續進行 |
| 確認範圍判定草案、確認範圍 3 的目標項目、破壞性變更一覽表、測試目標的修正位置 | 以判定草案與一覽表繼續進行。確定事項記載於「需確認」,由負責人在 PR 審查時進行 |
| 排除的測試等級、是否將 V9:並行處理與資源納入目標 | 使用設定檔的值 |
| 實作範圍 | 遵循設定檔的策略 |
| 無測試機制時的工具選擇 | 使用設定檔中記錄的工具 |
| 新增執行測試所需的函式庫 | 僅新增設定檔允許清單中的項目。其他項目不新增,並記載於「需確認」 |
| 新增至不穩定測試一覽表 | 不執行。候選項目記載於「需確認」 |
| 安裝函式庫、使用網路的漏洞掃描與靜態程式碼分析 | 遵循設定檔的許可。若無許可則不執行,並記錄為「由 CI 確認」 |
| 運行時間較長的測試 | 遵循設定檔的策略。若無策略則交由 CI 處理 |
| 差異是否符合預期、更新預期值 | 不進行判斷。也不更新預期值。若產生差異,則記載於「需確認」 |
| 張貼評論至 Issue 與 PR | 執行。省略張貼前的確認 |
| 若無觸發 Issue 則建立 Issue | 建立。省略建立前的確認 |
3. 確認輸入資訊
依據指南「第七章:著手前應收集的資訊」的表格(I1 至 I14),備齊作業所需的資訊。
3.1 需確認的項目
| 場景 | 需確認的項目 |
|---|---|
| 緊急應對 | I1 至 I13 的全部。若包含原始碼修正,則 I5 需包含修正 PR 的差異 |
| 平時恆久準備 | I7・I8・I8a・I9・I10・I13 |
| 計畫性檢查 | 依據檢查類型,依循指南「第七章:著手前應收集的資訊」中「計畫性檢查使用的資訊」表格(相依性更新:I3 至 I11・I13、漏洞修復:I1 至 I11・I13、原始碼修正:I5 至 I11・I13・I14)。同時確認觸發的 Issue 與套用修正的時間 |
I11(Staging 環境)在確認範圍 2 與 3 中為必須。I12(著手請求時間與期限)僅用於緊急應對。
3.2 資訊收集方式
- 自行從儲存庫收集的資訊。 以下資訊透過讀取目標應用程式的儲存庫收集。
- I3:更新前後的版本(比較基準分支與當前分支的相依性檔案。若為執行環境更新,則一併比較「3.3:狀態確認」中的檔案)
- I5:更新前後的原始碼差異。若包含應用程式原始碼的修正,則為 PR 的差異
- I6:相依樹、一併更新的間接相依
- I7:語言、應用程式類型、外部連線對象
- I8・I8a:當前測試、GitHub Actions 的 workflow、覆蓋率報告
- 從外部傳入的資訊。 以下資訊由其他流程收集(指南「7.1:漏洞資訊與修補程式變更內容的存放位置」)。使用
gh指令讀取。Issue 的識別方式依循「2.1:啟動方式」的「目標 Issue(張貼位置)」。- 漏洞資訊(I1・I2。用於緊急應對與計畫性檢查的漏洞修復)。 從標題包含 CVE 編號的 Issue 讀取。
- 靜態程式碼分析結果(I14。用於計畫性檢查的原始碼修正)。 從標題包含「靜態程式碼分析」與分析建議識別碼的 Issue 讀取。
- 定期偏離檢查的 Issue(用於計畫性檢查的相依性更新)。 從標題包含「定期偏離檢查」與更新對象名稱的 Issue 讀取。
- 修補程式變更內容(I4・I5)。 從包含修補程式或修正的 PR(例如:Dependabot 的 PR)的說明文字讀取。
- 套用修正的時間(計畫性檢查)。 從上述 1 至 3 的觸發 Issue 讀取。
- 若未找到,或無法使用
gh(例如未認證),則由使用者透過對話提供。
- 需詢問使用者的資訊。 I9(效能基準)・I10(排除的測試等級)・I11(Staging 環境)・I12(著手請求時間與期限)・I13(體制)若在儲存庫或 Issue 中找不到,則詢問使用者。I13 是判斷與核准的請求對象,因此為必須項目,在收到回應前不得繼續。
3.3 狀態確認
本節僅在緊急應對與計畫性檢查時執行。平時恆久準備時跳過。
- 確認修補程式已套用。 此技能啟動的前提是已取得包含修補程式或修正的 PR 分支。比較基準分支與當前分支,確認修補程式已套用。
- 若為函式庫更新,則比較相依性檔案。
- 若為執行環境・OS・中介軟體的更新(確認範圍 3),則一併比較
Dockerfile、workflow 中的執行環境指定(setup-java等版本)、以及指定執行環境版本的檔案(.java-version・.python-version・.nvmrc・global.json等)。 - 若為回應靜態程式碼分析建議,則確認建議(I14)的檔案與行號已包含在 PR 的差異中。
- 若未套用,則向使用者報告並停止作業。
- 外部修改的原始碼。 確認 PR 的差異中是否包含應用程式原始碼的變更。若包含,則記錄已修改的檔案與位置。無論觸發原因,將其納入測試目標(指南「2.4:所有確認範圍通用的測試」)。
- 基準分支。 確認「第八章:執行與比較測試」中使用的基準分支,並向使用者顯示。基準分支為 PR 的合併目標分支。若另行規定的指南 workflow 指定了其他基準分支,則遵循該設定。
- 資訊矛盾。 若提供的資訊與儲存庫內容不一致(例如:Issue 中記載的更新後版本與 lock 檔案不符),則向使用者確認。
3.4 處理缺少的資訊
依循指南「第七章:著手前應收集的資訊」。
| 場景 | 處理方式 |
|---|---|
| 緊急應對 | 列出缺少的必要資訊,向使用者(開發團隊的負責人)顯示,並等待當下判斷。在收到回應前不得繼續 |
| 平時恆久準備 | 將缺少的資訊記錄為殘留風險於報告中 |
| 計畫性檢查 | 將缺少的資訊記錄為殘留風險於報告中,並繼續作業 |
缺少的資訊與接收到的判斷,需記錄於報告中。
3.5 記錄
將收集到的資訊及其來源(儲存庫的檔案名稱、Issue 或 PR 編號、對話等),記錄於「第九章:輸出報告並張貼至 Issue」報告的開頭。
4. 分析目標應用程式
4.1 語言與建置工具
根據相依性檔案判斷語言與建置工具。
| 檔案 | 語言・建置工具 |
|---|---|
pom.xml・build.gradle* | Java(Maven・Gradle) |
pyproject.toml・requirements*.txt・poetry.lock | Python |
package.json・package-lock.json・tsconfig.json | TypeScript |
*.csproj・*.sln・packages.lock.json | C# |
4.2 應用程式類型
從啟動入口(Web 框架、main 函式或作業定義、畫面框架等)推測應用程式類型。以從選項中選取推測類型的狀態向使用者顯示,並附上理由尋求確認。若推測錯誤,則由使用者重新選擇。
- 選項:後端・批次處理・Web 前端・桌面應用程式(若兼具多種則可複選)
4.3 盤點現有測試與 CI
- 測試。 調查所使用的測試框架、各類型測試(單元・整合・E2E・契約・效能)的數量與存放位置、以及執行測試的指令。
- CI。 讀取
.github/workflows/,調查測試是否在 CI 中執行,以及是否存在比較修補前後執行相同測試結果的機制(指南「3.1.1:準備等級」的 P7)。僅讀取 workflow,不進行變更。 - 不穩定的測試。 確認是否存在不穩定測試一覽表(
patch-regression-reports/flaky-tests.md)。 - 外部連線對象。 盤點與外部的互動(DB・API・檔案等)。用於決定契約測試的對象。
4.4 診斷準備等級
針對指南「3.1.1:準備等級」的 P1 至 P11,判斷各項目為「有」「無」或「記錄理由後排除」,並附上理由整理成表格。據此判斷應用程式的準備等級(L0 至 L3)。
準備等級的條件為「在 CI 中運行」。因此,僅有測試或掃描存在於儲存庫中不算是「有」。必須確認在「4.3:盤點現有測試與 CI」中讀取的 workflow 確實有執行,才視為「有」。存在於儲存庫但未在 CI 中執行的項目,則標記為「無(CI 中未執行)」。
在計畫性檢查中,若 patch-regression-reports/ 記憶體在先前平時恆久準備或計畫性檢查的報告,則與最新的一份比較,記錄準備等級是否下降。若下降,則記錄需要作為平時恆久準備進行補齊,並記錄於殘留風險與不足一覽表的「團隊應對」中。
4.5 呼叫位置一覽表
建立應用程式原始碼中呼叫外部函式庫的位置一覽表(指南「3.1.1:準備等級」的 P4)。
| 場景 | 對象 |
|---|---|
| 緊急應對・計畫性檢查 | 要更新的函式庫(若應用程式直接呼叫一併更新的間接相依,則也包含在內) |
| 平時恆久準備 | 所有直接相依的函式庫 |
- 若在「3.3:狀態確認」中發現外部修改的原始碼,則不論場景,將修改的位置以及呼叫該位置的處理也納入對象。
- 針對每個呼叫位置,調查是否存在通過該位置的測試。透過閱讀測試程式碼判斷,若有覆蓋率報告則輔助使用。
- 一覽表儲存於
patch-regression-reports/call-sites.md。若已存在,則根據當前原始碼更新內容。
4.6 記錄
將「4.1:語言與建置工具」至「4.5:呼叫位置一覽表」的結果記錄於「第九章:輸出報告並張貼至 Issue」的報告中。
5. 確認範圍判定草案
本章僅在緊急應對與計畫性檢查時執行。由開發團隊的負責人確定確認範圍,此技能僅製作判定草案。
5.1 檢查類型(僅限計畫性檢查)
從觸發的 Issue 與 PR,判斷指南「3.5.1:檢查的觸發與類型」中的類型(相依性更新、漏洞修復、原始碼修正)。若一個 PR 包含多種類型,則分別針對各類型執行以下作業。
5.2 判定步驟
- 相依性更新・漏洞修復以及緊急應對。 遵循指南「2.2:判定步驟」的流程圖進行判定,並針對每個分支說明理由。理由中使用更新前後的版本(I3)、發行說明・變更記錄・遷移指南(I4)、更新前後的原始碼差異(I5)、以及相依樹(I6)。
- 若間接相依的版本也發生變更,則將變更的間接相依也作為更新對象進行判定,並配合最大的確認範圍(指南「2.3:判定注意事項」)。
- 簽名(Signature)的變更,依技術標準中各語言的確認方式進行確認。執行指令前需說明內容。若建置過程會下載相依函式庫,則依循「第八章:執行與比較測試」的開頭取得使用者許可。
- 原始碼修正(計畫性檢查)。 不使用確認範圍。將「3.3:狀態確認」中記錄的修正位置,以及呼叫該位置的處理,作為測試對象列為一覽表。同時記錄該分析建議是否為漏洞(用於判斷是否需要 C5)。
5.3 無法確認變更時
對於跨越數個版本的更新等情況,若無法透過發行說明或差異確認每個版本的變更,則依指南「2.1.1:無法確認變更時」,依據版本提升方式決定確認範圍。並說明無法確認的是哪個版本。
5.4 確認範圍 3 的目標項目
在確認範圍 3 中,根據更新內容判斷指南「2.5:各確認範圍的額外測試」中確認範圍 2 的哪些項目成為目標。
- 對於不涉及函式庫 API 變更的更新(例如:容器基礎映像更新),「函式庫端行為差異的分析」與「破壞性變更一覽表」無對象。標記為「不適用(理由)」。
- 對於涉及函式庫 API 變更的更新(例如:框架大版本更新),則將確認範圍 2 的所有項目納入目標。
- 若確認範圍 3 的環境確認(指南「3.3:確認範圍 3 環境確認的 CI 自動化」)未整合至 CI,則在不足一覽表中標記為「團隊應對」,並將判定草案設為「等待判斷」。此技能不得建立此環境確認的 workflow。
5.5 破壞性變更一覽表(確認範圍 2・3)
依每個主要版本閱讀遷移指南,建立破壞性變更一覽表。即使更新跨越兩個以上的主要版本,仍作為一個 PR 處理,為了能在產生差異時釐清是由哪個版本的變更所導致,一覽表需按版本分別撰寫。此一覽表用於「第六章:找出缺少的測試」以及「8.5:處理差異」的差異分類。若遷移指南不存在於 PR 的說明文字中,則請使用者提供。
5.6 與準備等級的比對(僅限緊急應對)
- 根據已判定的確認範圍與「4.4:診斷準備等級」中判定的準備等級,說明是否能在期限內(測試新增與執行預估 12 小時、部署至 Staging 為 24 小時)完成對應。若準備不足,預估無法在期限內完成,則依指南「3.1.1:準備等級」,向使用者顯示需要從負責人往上呈報至副理以上主管。
- 若在確認範圍 3 中環境確認未整合至 CI,則依指南「4.2:以緊急應對處理確認範圍 3 時」,顯示需要呈報。此技能不判斷系統停止或超過期限。
5.7 確定與記錄
向使用者(開發團隊的負責人)顯示檢查類型、確認範圍的判定草案、確認範圍 3 的目標項目、破壞性變更一覽表、以及測試目標的修正位置,並在獲得確定前不得繼續。將確定的內容、判定理由以及確定者記錄於「第九章:輸出報告並張貼至 Issue」的報告中。
6. 找出缺少的測試
6.1 比較基準
| 場景 | 基準 |
|---|---|
| 緊急應對・計畫性檢查 | 指南「2.4:所有確認範圍通用的測試」以及已確定的確認範圍之指南「2.5:各確認範圍的額外測試」(若為確認範圍 3,則包含「5.4:確認範圍 3 的目標項目」中納入的項目)。若存在外部修改的原始碼,則包含該修改位置以及呼叫該位置的處理之測試 |
| 平時恆久準備 | 指南「3.1.1:準備等級」P1 至 P11 中,使用者所選準備等級之前的項目 |
若個別案例中基準之間不一致,則在猶豫時傾向選擇更廣泛的確認方式,並向使用者說明。
無論哪種場景,都將指南「第五章:確認觀點檢查表」的 V1 至 V11 作為設計測試時的觀點。各觀點的確認方式依技術標準
…
[truncated 因原始內容過長]