非功能測試是指為測試軟體應用程式的非功能方面而執行的軟體測試。
有許多不同類型的非功能性測試，某些類型的軟體測試可以同時被視為功能測試和非功能性 測試 。
非功能測試是必要的，因為它評估基本的用戶標準，如 性能和 可用性，並驗證軟體是否在其基本功能之外按預期運行。
在本文中，我們將探討非功能性測試的定義和特徵，以及非功能性測試的類型、非功能性測試的方法以及可以幫助優化和改進您自己的非功能性測試流程的測試工具。
什麼是非功能性測試？
非功能性測試是任何類型的軟體測試，其中 測試軟體 構建的非功能性方面。
非功能性測試的範例包括旨在評估容量、性能、可用性、恢復和可移植性的測試。
驗證每個非功能性標準的質量和狀態與驗證軟體的功能一樣重要，但這些參數不會在標準功能測試中進行測試。
從本質上講，非功能測試意味著測試軟體功能“如何”工作，而不是測試“是否”工作。
1. 什麼時候需要非功能性測試？
非功能測試是在進行單元測試和集成測試后，在軟體測試的系統測試階段執行的。
在系統測試期間，測試人員將執行功能和非功能測試，從功能測試開始。
一旦測試人員確定軟體按預期運行，他們就會進行非功能測試，以評估它是否也滿足非功能參數。
通常需要在非功能測試之前進行功能測試，因為不可能測試根本不起作用的功能的可靠性或性能。 非功能性測試是 使用者驗收測試和 最終產品發佈之前軟體測試的最後階段之一。
2. 當您不需要非功能性測試時
測試軟體的非功能方面始終很重要，除非它們已經過測試並發現足夠。
即使您以前對軟體執行過非功能測試，也可能需要再次測試非功能參數，例如，如果已向軟體添加了新功能，或者對代碼進行了可能影響性能和可靠性的更改。
非功能測試的目標
非功能性測試的目標是檢查產品是否符合使用者期望，並在發佈前優化產品。
它還可以幫助開發人員和測試人員更好地理解軟體，並在未來的優化中使用這些知識。
1. 品質控制
非功能性測試旨在測試影響產品可用性、可靠性、可維護性、便攜性和效率的因素。
測試這些元素可確保投放市場的產品具有適當的高品質，並滿足使用者在性能、 載入時間和使用者容量方面的期望。
2. 風險管理
非功能性測試還可以通過最大限度地提高團隊發佈令人滿意的產品的機會來降低與向市場發佈產品相關的風險和成本。
通過檢查軟體構建的非功能參數，可以降低發佈產品的成本，因為減少了以後進一步開發和軟體更改的需求。
3. 優化
非功能性測試可幫助測試人員和開發人員在安裝、設置、執行和使用過程中優化軟體構建並優化性能。
您還可以使用非功能性測試來優化管理和監視軟體生成的方式。
4. 數據收集
非功能性測試允許測試人員收集和生成可供測試團隊用於內部研究和開發的度量和指標。
您可以使用從非功能性測試中收集的數據來了解產品的工作原理以及如何更有效地為使用者優化產品。
5. 知識提升
非功能性測試改進和增強了測試團隊對產品行為及其使用技術的瞭解。
這不僅可以幫助測試團隊更好地了解他們正在開發的軟體，而且還可以提供有用的知識，幫助測試人員更好地瞭解未來的構建。
誰參與非功能性測試？
非功能性測試通常由 QA 環境中的測試人員執行，但有時開發人員可能會在開發過程中執行非功能性測試。
系統測試幾乎總是由測試人員執行，這是大多數非功能測試發生的測試階段。
如果非功能性測試失敗，測試人員會將軟體發回給開發人員，以糾正性能錯誤，然後再進行測試。
非功能測試的好處
執行非功能測試有很多好處，非功能測試是系統測試中必不可少的步驟。
如果沒有非功能性測試，測試團隊將無法驗證軟體是否確實滿足客戶的要求或是否滿足軟體開發計劃中規定的要求。
1. 提高軟體性能
非功能性測試可以幫助測試人員和開發人員提高軟體應用程式的整體性能。 非功能性測試可識別軟體性能不足的領域，例如載入速度或處理能力，並提示軟體團隊進行更改以糾正這些缺陷。
這確保了軟體團隊僅在軟體準備就緒且性能足夠好時才向公眾發佈軟體。
2. 確保軟體安全
非功能性測試包括安全測試，這對於確保軟體構建安全並免受外部威脅和攻擊至關重要。
安全測試使測試人員和開發人員能夠檢查軟體是否充分保護了機密數據，並具有足夠的安全性來防範當代網路攻擊。
3.增加軟體的使用者友好性
非功能性測試是使軟體更加使用者友好的最佳方法，特別是通過執行可用性測試來評估用戶學習如何使用和操作軟體的難易程度。
使用者友好性非常重要，因為它決定了使用者對您的軟體的滿意度，並確保用戶能夠充分利用您的軟體提供的所有內容。
4. 確保軟體滿足使用者需求
確保軟體滿足使用者的需求應該是所有軟體開發和測試團隊的首要任務之一。 除了期望軟體正常運行外，使用者還希望軟體性能良好、運行平穩並保護機密數據。
非功能性測試是確保軟體滿足這些要求的唯一方法之一。
非功能性測試的挑戰
執行非功能測試有一些缺點。 雖然非功能性測試在軟體測試的系統測試階段是必不可少的，但非功能性測試的過程可能會給沒有充足資源和工具的軟體團隊帶來挑戰。
1. 重複
軟體測試中的非功能性測試必須在每次開發人員更新軟體或每次更改代碼時執行。 這意味著非功能性測試可能非常重複，這不僅需要時間，而且會使測試人員疲憊不堪。
執行非常重複性任務的疲憊測試人員也更容易分心並犯錯誤。
2. 成本
由於非功能性測試非常重複，因此成本也很高，特別是對於依賴手動非功能性測試的測試團隊。
軟體團隊必須為頻繁的非功能性測試分配時間和預算，軟體開發人員將不得不為這種額外的測試支付額外費用。
我們在非功能測試中測試什麼？
非功能測試可用於測試許多不同的非功能參數，每個參數都會影響系統的 品質和 可用性。 在系統測試期間，根據測試計劃中規定的標準對這些參數中的每一個進行測試。
1. 安全
安全測試是一種非功能性測試，用於衡量系統抵禦外部威脅和攻擊的程度。 其中包括故意違反安全漏洞以及數據洩露和其他常見違規行為。
安全測試是非功能性測試中的重要一步，因為它為最終使用者和客戶提供了其數據安全的保證。
2. 可靠性
測試人員使用非功能測試來評估軟體的可靠性，並確保軟體能夠連續執行其指定的功能而不會出現故障。
雖然功能測試確保軟體執行其關鍵功能，但只有非功能測試才能真正測試這些結果的可靠性和可重複性。
3. 生存能力
生存能力描述了軟體系統在發生故障時如何回應，生存能力測試確保如果確實發生錯誤和故障，系統可以自行恢復。
例如，生存能力測試可以檢查軟體是否能夠保存數據，以在突然故障的情況下最大限度地減少數據丟失。
4. 可用性
軟體的可用性是指用戶在運行過程中可以依賴系統的程度。 這也稱為穩定性，並通過穩定性測試進行測試。
穩定性測試與可靠性測試有些相似，因為它檢查系統是否可以始終如一地按照預期標準執行。
5. 可用性
可用性測試是軟體測試中另一種重要的非功能性測試類型。 這種類型的測試通過按照螢幕上提供的說明和其他基本指南來評估用戶學習、操作和使用軟體系統的能力。
可用性測試很重要，因為如果軟體不是高度可用，大多數用戶會簡單地放棄它或選擇使用其他東西。
6. 可擴充性
可伸縮性測試測試軟體應用程式可以在多大程度上擴展其處理能力以滿足不斷增長的需求。
例如，如果軟體設計為由單個網路上的多個用戶同時使用，那麼當十個使用者同時登錄時，它是如何工作的？ 較高的用戶計數是否會顯著影響性能或載入時間？
7. 互操作性
互操作性測試是一種非功能性測試，用於檢查軟體系統與其他軟體系統的交互情況。
當軟體被設計為一套相互集成的產品的一部分時，這一點尤其重要。
8. 效率
軟體測試的效率是指軟體系統可以處理容量、數量和回應時間的程度。
例如，測試人員可以評估一次可以登錄系統的用戶數量、從資料庫中檢索數據所需的時間或軟體執行基本任務的速度。
9. 靈活性
靈活性衡量軟體系統與不同類型的硬體和外圍設備一起工作的程度。
例如，軟體需要多少 RAM 或是否需要特定數量的 CPU。 對軟體應用的要求越低，軟體就越靈活。
10. 便攜性
可移植性測試用於測試軟體從其當前硬體或軟體環境中傳輸的靈活性，以及這有多容易。
可移植性很重要，因為它會影響最終使用者管理軟體和在不同系統之間移動軟體的難易程度。
11. 可重用性
可重用性測試是一種非功能性測試，用於測試軟體系統的某些部分是否可以轉換為在另一個應用程式中重用。
雖然可重用性測試通常不會影響客戶端和最終使用者，但它很好地反映了開發人員創建將來可以重用的元件的效率。
非功能測試的特點
了解什麼是非功能測試涉及瞭解非功能測試的特徵。 這些特徵定義了軟體測試中的非功能性測試。
1. 可衡量
非功能性測試始終是定量和可測量的，這意味著測試人員不使用“好”或“好”等主觀短語，而是使用數位和事實來描述非功能測試的輸出。
例如，非功能測試不應將載入時間描述為「快」或「慢」，而應產生顯示次數的特定數位。
2. 具體
在進行非功能測試時，測試的目的應特定於軟體的設計規範。
例如，如果軟體項目計劃是指應該能夠一次登錄的用戶數，則在進行非功能性測試時應優先考慮此數量。
3. 未知
雖然非功能性測試可以專門設計用於測量項目計劃中列出的屬性，但在許多情況下，這些屬性不會提前指定。
在這種情況下，測試人員應該簡單地執行非功能測試，根據每個參數評估軟體，然後將這些參數與預期進行比較。
非功能測試的生命週期
由於非功能性測試不是指軟體測試生命週期中的特定階段，而只是指通常在軟體測試的系統測試階段發生的一種測試類型，因此非功能性 測試 的生命週期在專案之間可能會有很大差異。
通常，它遵循與其他類型的軟體測試類似的生命週期，從分析專案需求開始，到測試執行和週期實現結束。
1. 軟體需求分析
非功能性測試生命週期的第一階段是軟體需求的分析。 軟體團隊在構建和測試應用程式時會遵循特定的標準，這些標準應該規定需要執行哪種類型的測試。
2. 測試計劃
生命週期的下一階段是測試計劃。 在測試計劃階段，QA 負責人將制定詳細的測試計劃，詳細說明將要測試的內容、誰將進行測試以及將使用哪些測試方法、方法和工具。
測試計劃應包括測試人員創建和執行測試用例所需的所有必要詳細資訊。
3. 測試用例創建
測試用例創建是非功能性測試的下一階段。 此階段涉及開發非功能性測試用例，測試人員將在稍後階段執行這些用例以測試系統的非功能性需求。
測試案例描述了將要測試的內容、測試方式以及測試的預期結果。
4. 測試環境設置
非功能性測試生命週期的下一階段是在測試開始之前設置測試環境。
測試環境是進行所有測試的地方，也是用於執行非功能性測試的資源和工具的所在地。
測試團隊在測試執行之前準備設置的測試環境。
5. 測試執行
測試執行是非功能性測試生命週期的下一階段。 它涉及執行以前創建的測試用例，以測試軟體應用程式的不同方面，包括安全性、載入時間、容量和可移植性。
測試團隊單獨執行每個案例，並根據預期結果檢查每個測試的結果。
6. 循環重複
非功能性測試生命週期的最後階段是週期實現和重複。 執行所有測試用例后，測試人員會檢查哪些測試通過，哪些測試失敗。
失敗的測試通常表示存在必須由開發人員修復的缺陷。 一旦開發人員修補或編輯了代碼，軟體測試週期將再次重複，直到沒有發現任何缺陷。
澄清一些困惑：
非功能測試與功能測試
功能測試和非功能測試是兩種不同但同樣重要的軟體測試類型，它們一起用於評估軟體應用程式是否滿足專案簡介中規定的使用者要求。
雖然它們都是必要的測試類型，允許軟體團隊識別軟體構建中的缺陷，但功能和非功能測試彼此完全不同。
1. 功能測試和非功能測試有什麼區別？
功能和非功能測試之間的區別在於它們測試的內容。 功能測試測試應用程式的功能，並檢查它們是否按預期工作。 非功能測試測試影響用戶滿意度和應用程式品質的應用程式的其他方面。
功能和非功能測試發生在軟體測試的不同階段，但這兩種類型的測試通常在系統測試階段進行。
功能和非功能測試都可以幫助我們瞭解應用程式的工作情況以及它是否充分執行其工作。
例如，如果您正在測試允許使用者保存待辦事項清單和購物清單的移動應用程式，則功能測試可能會 測試 創建新清單、保存清單和編輯現有清單等功能。
非功能性測試可以評估應用程式在不同行動裝置上的運行情況、清單載入速度以及當其他應用程式在後台運行時應用程式性能受到的影響程度。
2. 結論：非功能測試與功能測試
功能和非功能測試都是重要的軟體測試類型，可以幫助測試人員和 QA 團隊評估應用程式是否滿足其當前需求。
功能測試測試軟體的功能，而非功能測試測試可能影響性能、效率和安全性的其他方面。
單元測試、 集成測試和 API 測試都是功能 測試 的形式。 在軟體測試的每個階段，測試人員都會評估功能和特性單獨或協同工作的情況，並識別阻止功能按預期運行的錯誤和缺陷。
安全測試、可用性測試、可移植性測試和負載測試都是非功能性測試的形式，允許測試人員評估應用執行其功能和支持使用者需求的情況。
非功能測試的類型
有許多不同類型的非功能性測試，每種測試都測試軟體應用程式性能或效率的不同非功能性方面。
這些類型的測試中的每一種都將測試不同的參數，並且某些測試可能會以不同的方式測試相同的參數。
1. 效能測試
性能測試是一種非功能性測試，用於檢查不同軟體元件的運行情況。 性能測試不是測試其功能（功能測試的作用），而是測試回應時間、瓶頸和故障點。 性能 測試可幫助測試人員確保軟體具有高品質，並且快速、穩定且可靠。
2. 壓力測試
壓力測試是一種非功能性測試，用於測試軟體在承受異常壓力時的性能。 這可能意味著當有人嘗試同時使用許多不同的功能或同時運行許多其他應用程式時，測試軟體的性能。
壓力測試旨在確定軟體停止正常工作的極限以及系統處於壓力之下時會發生什麼。 它允許測試人員了解系統是否可以自行恢復，以及它是否通過適當的錯誤訊息通知使用者。
3. 負載測試
負載測試是一種測試類型，用於評估軟體在正常條件下和處理較重負載時的表現。 它用於確定軟體可以同時處理多少而不會對性能產生負面影響。
負載測試可用於測試當大量用戶同時使用應用程式或使用者嘗試同時下載大量數據時應用程式的工作方式。
如果要檢查軟體是否可擴展，負載測試非常重要。
4. 安全測試
安全測試評估軟體應用程式並查找軟體安全性中的漏洞。 其中包括可能導致數據丟失或洩露機密數據的潛在安全風險。
安全測試很重要，因為它可以確保產品得到充分保護，免受駭客攻擊、數據洩露和其他外部安全威脅。
測試人員可能執行的一些安全測試範例包括安全審核、道德駭客攻擊、滲透測試、安全掃描和狀態評估。
5. 升級和安裝測試
升級和安裝測試是一種非功能性軟體測試，用於驗證軟體在不同計算機上的運行情況。
此類測試的目的是確保新使用者可以輕鬆地在其計算機上安裝軟體，並且現有使用者可以在新升級發佈時對其進行升級。
升級和安裝測試非常重要，因為最終用戶必須能夠輕鬆安裝您的產品，前提是他們使用的是與之相容的計算機。
6. 體積測試
卷測試是一種測試類型，用於驗證一次將大量數據添加到資料庫時會發生什麼情況。 這標識應用程式是否可以處理大量數據，以及如果不能處理，系統會發生什麼情況。
批量測試也稱為泛洪測試，您可以使用它來評估向系統添加大量數據時發生的數據丟失和錯誤消息。
批量測試是確保軟體能夠處理使用者期望的數據量的唯一方法。
7. 恢復測試
恢復測試涉及強制軟體系統無法測試系統在崩潰后自我恢復的程度。
恢復測試可以幫助測試人員了解軟體如何恢復數據，並在使用過程中拔下硬體、在數據傳輸期間軟體與網路斷開連接或意外重新啟動系統時防止丟失。
這種類型的測試很重要，因為當發生此類事故時，沒有適當恢復協議的系統可能會遭受嚴重的數據丟失。
啟動非功能性測試需要什麼
在開始非功能性測試之前，您需要確保已準備好測試環境並收集了所需的工具和數據。
1. 測試計劃
在開始非功能性測試之前，請確保您有一個已完成的測試計劃，該計劃已由適當的人員簽署。
您的測試計劃應包括要測試的內容和方式的所有相關詳細資訊。 它應該解釋何時使用手動測試以及何時使用自動測試，並概述參與測試過程的每個人的角色和職責。
2. 測試用例
在執行非功能性測試之前，需要創建測試用例。 每個測試用例都概述了您將要測試的特定內容，解釋了您將如何測試它，並描述了測試的預期結果。
例如，如果要執行負載測試，則示例測試用例可能是測試當十個用戶同時使用同一模組時軟體的行為方式。
3. 功能驗證
如果軟體元件不起作用，則無法對它們執行非功能測試。
例如，如果要測試軟體可以處理同時登錄的用戶數，則首先要驗證單個使用者是否可以實際登錄到該軟體。
在開始非功能性測試之前，請確保所有功能測試都已通過，並且軟體按預期運行。
這通常意味著已經執行了 冒煙測試、 健全性測試、單元測試、集成和功能系統測試。
4. 測試工具
在開始非功能性測試之前，請將要用於執行測試的所有測試工具收集在一起。
您是否使用自動化工具部分 自動執行某些測試 或文檔工具，以説明您管理和存儲測試報告以供以後使用，確保要使用的工具可用並可供使用，並且測試團隊中的每個人都知道如何正確使用每個工具。
5. 測試環境
在開始非功能性測試之前設置測試環境。 您可能已經有一個合適的測試環境，特別是如果您可以將相同的環境用於非功能性系統測試和功能系統測試。
理想的測試環境允許您在正確的設備上測試所需的每個元素。
例如，如果要在智慧手機設備上測試卷處理，則最好在實際的智慧手機設備上進行測試，而不是嘗試在台式計算機上模擬移動環境。
非功能性測試過程
測試軟體構建的非功能性方面是一個多步驟的過程，包括準備測試環境、創建測試用例、收集測試數據以及執行非功能性測試。
可以將測試過程分解為小塊，以便初學者在非功能測試中更容易遵循。
1. 非功能性測試準備情況檢查
在開始非功能性測試之前，請務必驗證是否已準備好進行此階段的測試。
這可能意味著評估測試最後階段的退出標準，以確保軟體已通過測試，並確保軟體已通過非功能測試之前所需的所有功能測試。
一些團隊可能會為非功能性測試創建進入標準，其中包括在非功能性測試開始之前必須滿足的所有條件。
2. 建立測試計劃
如果您在系統測試中執行非功能性測試並遵循系統測試計劃，則可能已經更早地執行了此步驟。 測試計劃概述了您需要執行的所有測試以及您打算如何執行這些測試。
如果沒有明確的測試計劃，很容易忽視您正在執行的測試的範圍和目標。
3. 建立測試用例
非功能測試的下一階段是創建旨在測試軟體的每個非功能參數的測試用例。
每個測試用例都應具有測試用例ID、測試用例名稱、說明和測試預期結果的詳細資訊，以及預先確定的任何通過或失敗條件。 這有助於測試人員瞭解如何執行每個測試以及要查找的結果。
4. 收集測試數據
在執行每個測試用例之前，需要收集將用於每個測試用例的 測試數據 。
這通常意味著從構成要測試的功能和區域的不同模組和元件中收集代碼和數據。 如果要最大限度地提高測試覆蓋率，則應使用大量測試數據。
5. 準備測試環境
非功能性測試的下一階段是準備測試環境。 測試環境是一個測試伺服器，您將使用它來執行許多不同類型的軟體測試。
它允許您創建相同的條件來測試軟體，並使用不同的配置設置軟體，以進行配置測試、安全測試和其他類型的非功能測試。
6. 執行非功能測試
測試環境準備就緒后，就可以執行非功能性測試了。 您可以決定按類型順序執行測試，例如，從性能測試開始，然後再進行安全測試和其他類型的非功能性測試。
在執行每個測試時，請記下測試報告中的結果。 如果您正在自動化測試，您的 自動化工具也將採用標準化的方式來清晰明確地報告結果。
7. 報告測試結果
執行每個測試用例后，將非功能性測試的結果編譯為單個報告。
此報告應明確每個測試的結果，並明確說明每個測試是通過還是失敗。
遵循測試報告的標準化結構，以確保包含需要傳遞的所有資訊。
8. 修復缺陷
測試結果出來后，如果測試失敗或發現任何需要修復的非功能性錯誤，請將軟體交還給開發人員。
例如，如果軟體不能同時處理適當數量的使用者，或者在同時運行多個程式時性能下降太多，則可能需要在代碼中修復這些問題，以確保使用者對產品感到滿意。
9. 重複測試週期
一旦開發人員修復了在初始非功能測試階段發現的任何缺陷，測試週期就可以重新開始。
開發人員將健全地測試他們所做的更改，並將新版本傳回給QA測試人員，然後QA測試人員將執行全套測試，從冒煙測試，單元測試，集成測試開始，最後是系統測試。
重複測試週期，直到在任何時候都沒有出現錯誤或缺陷，之後構建可以進入測試的最後階段： 使用者驗收測試。
非功能測試的測試用例
測試用例是所有軟體測試的一個重要方面，當您執行功能和非功能測試時，您將使用測試用例來定義要測試的內容以及如何測試它。
每個測試用例都可以看作是一個小型測試，每個測試用例都有自己定義的輸出和結果。
1. 什麼是非功能性測試的測試用例？
測試用例是對軟體版本執行的一組操作，用於測試它是否滿足軟體計劃中定義的條件。 每個測試用例都有效地告訴測試人員要測試什麼以及如何測試，並且旨在測試軟體應用程式的特定功能或非功能特性。
非功能性測試用例可能包括測試當有人嘗試訪問系統內的安全數據時會發生什麼，或者測試軟體在啟動時的載入速度。
2. 如何設計非功能性測試用例？
在為非功能性測試設計測試用例時，遵循標準測試用例實踐，同時牢記非功能性測試的目標非常重要。
按照以下步驟為非功能性測試編寫測試用例，清楚地概述測試人員執行每個測試必須執行的操作。
1. 定義要覆蓋的區域
對於每個測試用例，請考慮此測試用例將涵蓋軟體的哪個區域。
例如，如果您正在編寫用於安裝和升級測試的測試用例，則可以包括測試用例，這些測試用例評估應用程式在不同設備上安裝的難易程度以及使用新修補程式升級軟體所需的時間。
2. 建立唯一的測試用例 ID
每個測試用例都應具有唯一的測試用例ID。 這樣，以後可以輕鬆找到測試用例說明和結果，並消除在兩個測試用例具有相似名稱或說明時所引用的測試用例的任何混淆。
3. 命名並描述每個測試
雖然測試用例 ID 識別測試，但您還需要為您編寫的每個測試用例提供名稱和說明。
它應該是一個簡單的名稱，總結了您正在測試的內容，而描述是一個句子，可以更詳細地闡述這一點。
描述應該足夠清晰，以便測試人員知道要測試什麼以及如何測試它，以及測試中需要滿足的任何特定條件。
4. 指定預期結果
對於每個測試用例，概述軟體按預期工作時應出現的結果。
在性能測試和負載測試等非功能測試中，這可能意味著在許多情況下，軟體只是繼續正常運行，而不會變慢、滯後或崩潰。
在其他情況下，這可能意味著發生特定的錯誤消息以通知用戶問題並推薦解決方案。
5. 推薦測試技術
對於每個測試用例，推薦您認為測試人員在測試期間應使用的測試技術和非功能性測試工具的類型。
在非功能性測試中，測試人員可能會對不同類型的測試使用非常不同的方法。
例如，負載測試和壓力測試可能需要自動化，因為手動類比極重的流量是不切實際的，而其他測試類型可能更容易執行，而無需任何特定的工具或技術。
6. 讓每個測試用例進行同行評審
在簽署每個測試用例之前，請讓與您合作的人員對每個用例進行同行評審。 這可能是另一個測試人員或QA主管。
同行評審測試用例確保它們足夠清晰，可供第三方測試人員遵循，並且不包含任何可能導致不當測試的歧義或錯誤。
3. 非功能性測試用例範例
如果您正在為非功能性測試編寫測試用例，它們可能類似於下面的非功能性測試範例。
可擴展性測試範例
測試用例 ID：6671
測試案例名稱：多使用者登錄測試
描述：類比 20+ 使用者使用自動化工具同時登錄軟體。
預期結果： 軟體應為每個使用者正常運行，允許每個使用者在5秒內成功登錄。
相容性測試範例
測試用例 ID：5214
測試用例名稱：在 Opera 瀏覽器中載入應用程式
描述：在 Opera Web 瀏覽器中載入應用程式。
預期結果： 應用程式在 Opera Web 瀏覽器中正常載入，具有標準顯示解析度和佈局。
手動還是自動非功能測試？
當您在不同的非功能測試技術之間進行選擇時，您必須決定是要執行手動測試還是自動非功能測試。
手動測試由人工測試人員執行，這意味著它們通常更耗時，但它們也提供了探索性測試的機會。
自動化非功能測試更快，在某些方面更可靠，但它們也需要更多的資源或工具。 自動化和 超自動化 在測試中越來越受歡迎，尤其是在非功能性測試方面。
手動非功能性測試：優勢、挑戰和流程
手動非功能測試僅由測試人員執行，他們將獨立測試每個單獨的非功能元素。
在進行手動非功能性測試時，測試人員必須收集有關軟體的信息，創建與測試計劃匹配的單個測試用例，並手動執行這些測試用例。
這需要相當長的時間，但這也意味著QA測試人員可以自由決定測試什麼以及如何測試。
1. 手動測試的一些好處包括：
手動測試可能比自動測試便宜，因為它不需要特定的技術或技術知識。
● 手動測試允許測試人員提供人類對軟體功能方式以及是否令人滿意的見解和主觀性。
● 手動測試可用於在無法自動化的場景下進行系統測試。
● 手動測試允許測試人員評估系統的視覺方面，例如圖形介面和其他可能影響可用性的因素。
● 手動測試為測試人員提供了更廣泛的系統整體視角，以及不同模組和元件如何協同工作
但是，手動測試也有缺點。
2. 手動測試的一些挑戰包括：
● 某些類型的非功能測試，包括負載測試和性能測試，手動執行是不切實際的
● 手動測試比自動非功能測試花費更多的時間
● 手動測試人員可能會分心、注意力不集中和犯錯誤，尤其是在執行非常重複的測試任務時
自動化非功能性測試：優勢、挑戰和流程
自動化非功能性測試由自動化腳本和測試工具執行。 使用自動化測試方法時，一旦啟動了自動化測試，測試人員就可以在後台進行測試，同時繼續執行其他任務。
1. 自動化非功能測試的一些好處是：
1. 通過減少花在冗長、耗時的任務上的時間來節省時間和資源
2. 自動化通過覆蓋更廣泛的元件和功能，可以提高測試覆蓋率
3. 經常進行自動化測試更可行，因為它們需要更少的時間來執行
4. 自動化測試非常適合耗時的測試任務，如負載測試、批量測試和壓力測試，這些任務很難手動執行
5. 執行自動化測試時出錯的幾率較低
但是，自動化測試也存在一些缺點，這意味著它並不總是所有類型的非功能性測試的正確方法。
2. 自動化非功能性測試的一些挑戰包括：
1. 自動化測試的設置成本高於手動測試
2. 設置測試自動化可能需要時間和技術資源
3. 測試自動化不允許為探索性測試留出空間
4. 自動化測試仍然需要時間來創建測試用例
結論：手動或自動
非功能測試？
在大多數類型的軟體測試中，結合手動和自動測試通常可提供最佳結果。 這使測試團隊能夠從自動化測試的效率、可靠性和準確性中受益，同時還進行探索性測試，使測試人員能夠從更主觀的角度評估軟體。
在非功能性測試中，手動和自動測試對於大多數測試團隊來說幾乎都是必要的。
手動測試最適合用於執行非功能性測試任務，如可用性測試，而自動化測試最常用於執行過於耗時且難以手動執行的測試，例如壓力測試或批量測試。
非功能性測試是使用測試自動化技術最明顯的領域之一，因為它是一種定量的、可衡量的測試類型，不要求主觀結果。
與其他類型的測試一樣，非功能性測試通常使用手動測試和自動測試的混合進行。
然而，自動化測試對於許多類型的非功能測試實際上是必要的，非功能測試的參數和指標意味著自動化比功能測試更適合這種類型的測試。
非功能測試的最佳實踐
當您第一次進行非功能性測試時，遵循測試最佳實踐可以説明您標準化測試過程並優化測試的有效性。
最佳實踐可作為希望改進測試流程並與行業標準保持一致的軟體測試團隊的指南。
1. 使用自動化工具
在非功能性測試中，與其他類型的測試相比，使用自動化工具自動執行某些類型的測試非常重要，特別是批量測試、壓力測試和負載測試。
這些類型的測試通常會驗證軟體在來自使用者、數據和流量的巨大壓力下的運行情況，這可能是手動類比的非常困難的條件。
自動化這些類型的非功能測試不僅效率更高，而且更準確，並允許測試人員輕鬆複製更高的負載和應力。
2. 同行評審所有文件
除了要求同行審查您創建的測試用例外，還要求測試團隊中的同行查看錯誤報告、測試報告、測試計劃以及在測試過程中創建的其他形式的正式文檔。
這降低了可能導致測試和開發過程嚴重延遲的小錯誤的風險。
3. 定義可衡量的需求
在非功能性測試開始之前定義軟體的要求時，請確保每個需求都是客觀且可衡量的。
這使得測試人員更容易在測試期間確定軟體是否滿足這些要求，並且沒有解釋的餘地。
什麼算是「快速」或「高效」？ 使用數位和定量值來定義您要查找的內容。
4. 仔細考慮測試指標
在決定使用哪些指標來衡量軟體性能之前，請考慮軟體的使用者想要什麼，以及哪些指標實際上與軟體計劃和要求一致。
大多數軟體都應該快速可靠，但您的使用者可能會尋找哪些其他指標？ 在測試過程中，您是否應考慮任何特定於軟體的指標？
非功能測試的輸出類型
執行非功能性測試時，將從所執行的測試中獲得不同類型的輸出。
這些通常與功能測試輸出完全不同，功能測試輸出通常更清晰，因為功能測試只是測試功能是否正常工作。
與功能測試一樣，測試人員應該為每個測試用例設定明確的期望，以便於確定每個測試是通過還是失敗。
1. 絕對數
在執行性能測試、壓力測試和其他類型的非功能測試時，您可能最常看到的輸出是速度和其他絕對數位。
性能測試驗證系統執行某些任務的速度，這將以秒或毫秒為單位進行測量。
如果要執行負載測試，則可以評估軟體一次可以處理多少數據而不會崩潰或滯後。
2. 錯誤消息
非功能性測試還驗證系統在發生錯誤（如安全錯誤、驗證錯誤和配置錯誤）時的工作方式。
當發生錯誤時，系統必須顯示準確而清晰的錯誤消息，以便使用者可以採取措施糾正問題並繼續使用該軟體，這一點很重要。
在安全測試期間，當系統阻止使用者違反軟體的內置安全功能時，也應該出現錯誤消息。
3. 崩潰
崩潰是系統故障的標誌，它通常表示系統無法在你正在測試的級別上執行，可能意味著測試通過。
在某些情況下，系統可能會崩潰，但仍能通過您正在處理的測試用例，例如，如果系統在崩潰之前承受了所需的壓力或流量。
在執行非功能測試時，測試人員應該期望系統定期崩潰，尤其是在將其推到壓力測試和其他性能測試的極限時。
非功能測試範例
非功能性測試範例類似於上述非功能性測試用例的範例。
您可以查看非功能測試的範例，以更好地了解什麼是非功能測試以及它在軟體應用程式中測試的內容。
1. 效能測試範例
如果您正在使用將使用者連接到在線資料庫的移動應用程式，則大量使用者可以同時訪問和下載此資料庫中的數據非常重要。
這也是可伸縮性測試的關鍵部分，特別是如果您想將來增加應用的用戶數量。
然後，您將測試當 1000 個使用者嘗試同時存取同一資料庫時系統的反應，並設置在此條件下應用程式載入速度的要求。
2. 相容性測試
如果要測試新的文件管理應用程式，則需要測試它是否適用於其所針對的所有設備。
這意味著測試您是否可以在所有最新版本的 Windows、Mac 和您希望軟體相容的任何其他作業系統（如 Linux）上安裝和載入應用程式。
3. 安全測試
執行安全測試時，您將測試人們可能嘗試訪問機密數據或違反軟體安全保護措施的一些方式，以驗證系統在這些情況下的行為是否符合您的預期。
例如，您可以以使用者身份登錄並嘗試訪問沒有安全許可的檔，以確保系統不允許您訪問這些檔。
檢測到的錯誤和錯誤的類型
通過非功能性測試
非功能性測試可以揭示許多錯誤和缺陷，這些錯誤和缺陷不像功能測試中發現的那樣容易發現。 這是因為非功能測試通常需要測試人員驗證不同的配置、設置和條件組合，以評估系統在無數不同設置中的性能。
1. 性能缺陷
當系統運行時會出現性能缺陷，但它的運行速度不如您預期的那麼快或那麼高效。
例如，您可能會發現系統在某些情況下載入速度不夠快，如果同時登錄的使用者過多，甚至會崩潰。
性能缺陷不會完全阻止人們使用您的軟體，但它們會使您的軟體可用性降低，並且不太可能滿足使用者要求。
2. 安全缺陷
安全缺陷是影響軟體系統及其中存儲的數據的安全性的缺陷。
例如，如果使用者可以訪問他們不應訪問的機密數據，或者應用程式的某些部分未正確受密碼保護，或者加密失敗，則可能會出現安全缺陷。
這些可能會導致安全漏洞，從而對軟體發佈者的聲譽產生嚴重影響。
3. 功能缺陷
雖然非功能測試不是為了測試軟體應用程式的功能而設計的，但在某些情況下，非功能測試可以識別軟體中的功能缺陷。
例如，可靠性測試的目的不是測試應用是否正常運行，而是測試應用在重複嘗試時是否可靠運行。
這可能會揭示某些功能在重複操作時無法可靠地正常運行，並且這些功能可能被歸類為功能錯誤。
常見的非功能性測試指標
非功能性測試指標描述了衡量系統性能和效率的指標。
不同類型的非功能性測試依賴於不同的指標，您可以根據專案的最終目標選擇使用各種指標。
1. 時間
時間指標衡量執行某些任務所需的時間或用戶必須等待函數載入的時間。
時間指標的一些範例包括應用程式在給定時間範圍內可以進行的事務或下載數、不同功能的回應時間以及應用程式完成特定操作所需的時間。
不同類型的測試將以秒為單位測量結果，或者表示每秒有多少操作。
2. 空間
空間是非功能性測試中的另一個重要指標。 空間指標可以測試系統需要多少CPU空間，或者軟體完全安裝後佔用硬碟上的空間。
空間衡量指標的一些範例包括緩存記憶體、主記憶體和輔助記憶體。
需要大量空間才能平穩運行的軟體可能適合少數客戶。
3. 可用性
非功能測試中的一些指標考慮了系統的可用性，例如，訓練使用者正確使用系統需要多長時間，用戶必須流覽多少選擇才能執行關鍵功能，或者執行某些任務需要多少滑鼠點擊。
非功能性測試可以定量地衡量這些指標中的每一個，數位越低通常意味著可用性水準越高。
4. 可靠性
非功能性測試中的另一個重要指標是可靠性。 可靠性反映了系統一次又一次地以相同的方式運行或長時間運行的可能性。
用於衡量可靠性的一些指標示例包括平均故障時間、故障率、可用性和停機時間概率。
這些指標中的每一個都有助於測試人員驗證系統是否可以長時間運行而不會遇到故障或崩潰。
5. 穩健性
穩健性是衡量系統處理故障的能力以及系統在發生故障時自我恢復的能力的指標。
衡量可靠性的指標的一些示例包括系統在發生故障后自行恢復所需的時間、導致災難性故障的事件百分比以及系統故障後數據檔損壞的概率。
這些是重要的指標，因為使用者預計系統有時可能會在不丟失所有數據或損壞文件的情況下發生故障。
6. 便攜性
可移植性指標衡量軟體轉移到不同系統或移動到網路中新位置的難易程度。
衡量可移植性的一些指標示例包括不可移植代碼的百分比和軟體可以運行的系統數量。
理想情況下，可以在許多不同的系統上運行的軟體更具可移植性，因此在可能需要頻繁轉移或重新定位的環境中使用更方便。
進行非功能測試的策略
當您開始非功能性測試時，重要的是要考慮到策略來處理此測試階段。 QA 主管和軟體測試經理應該在非功能性測試開始之前考慮測試的風險、他們可用的資源以及測試的目的。
制定策略可以説明您從一開始就優化非功能測試。
1. 分配角色和職責
在開始非功能性測試之前，請將角色和職責分配給測試團隊的關鍵成員。 這樣可以更輕鬆地管理非功能性測試的工作負載，並確保經驗豐富的測試人員負責維護您執行的測試的品質和有效性。
確保您選擇擔任這些角色的人員具有執行您期望他們的任務所需的知識和經驗，尤其是在這些任務需要技術技能的情況下。
2. 收集相關測試工具
將要用於執行非功能測試的所有技術和工具彙集在一起。 確保您的所有團隊都知道如何有效地使用它們，並在必要時進行培訓以填補技能差距。
在非功能性測試開始之前，確保每個人都知道要使用哪些測試工具以及如何使用它們，可以降低由於知識不足而不得不暫停測試或重做 測試 的風險。
3. 確定測試的優先順序
在開始非功能性測試之前，請列出您需要測試的系統的所有方面，並根據緊急性和重要性確定它們的優先順序。
您可以根據要測試的系統的各個方面所涉及的風險級別來確定非功能性測試的優先順序。
例如，可能會進行基本的安全測試，因為在現代軟體中，足夠的安全性被認為非常重要。 越早識別高風險缺陷，這些缺陷對系統其他方面的潛在影響就越小。
7 種最佳非功能測試工具
非功能性測試工具可以簡化測試過程，使自動化測試變得更容易、更具成本效益，並説明 QA 主管管理測試和文檔過程。
網上有很多免費的非功能性測試工具，還有一些工具，你可以按月付費升級。
1. ZAPTEST 免費版
ZAPTEST是一種流行的軟體測試工具，允許使用者快速輕鬆地執行功能和非功能軟體測試。 您可以使用 ZAPTEST 自動執行軟體測試，並利用 RPA 技術類比非功能測試中的各種功能和條件。
ZAPTEST FREE版只是企業版的精簡版，在較小的規模上提供了許多相同的功能。 您可以在 ZAPTEST 論壇上尋求支援，並對無限的虛擬使用者進行性能測試。
2. 應用層
Appium 是一款免費的軟體測試工具，最適合在各種不同的平臺上測試移動應用程式，包括 iOS 和 Android 設備。 Appium 為使用者提供了很大的靈活性來設計自己的測試框架和策略，同時受益於 Appium 提供的自動化功能。
3. 負載
Loadium 是一種非功能性測試工具，最適合用於執行性能測試和負載測試，這兩種類型的非功能性測試使用自動化工具更容易執行。
Loadium 允許使用者運行大規模負載測試並提供自定義解決方案，以便您可以根據軟體目標定製測試。
您可以免費試用Loadium或付費下載該應用程式的完整版本。
4. 奧布基奧
Obkio 是一種軟體測試工具，可説明 QA 主管和測試經理根據問題的嚴重程度對問題進行優先順序排序和分類。 Obkio 可以在使用者之前檢測到問題，為使用者提供智慧通知，並可以幫助檢測問題所在。
Obkio 不僅適用於非功能性測試，而且是一個非常有用的免費測試工具，可用於測試生命週期的所有階段。
5. 聲納Qube
SonarQube是一個開源的安全測試工具，可以自動分析代碼以檢測錯誤和漏洞。 用Java編寫，您可以使用SonarQube分析二十多種不同程式設計語言的代碼，並且系統的乾淨介面可以輕鬆檢測將來可能導致安全漏洞的問題。
6. 宗
Tsung 是另一個非功能性測試工具，如果您想自動化負載和壓力測試，但不能繼續使用Loadium的免費版本，它是理想的選擇。
Tsung 是一個開源工具，允許使用者跨多個協議和伺服器（包括 HTTP 和 SOAP）進行大容量負載測試。
Tsung 是完全免費的，它可以幫助測試人員確保他們正在開發的軟體在各種具有挑戰性的條件下提供高性能水準。
7. 西庫里
Sikuli 是另一個使用機器人過程自動化來 自動化測試過程 的應用程式。 該應用程式可以自動執行螢幕上可以看到的任何內容。 您可以使用 Sikuli 來測試非基於 Web 的應用程式並快速重現錯誤。
非功能性測試清單、提示和技巧
在開始非功能性測試之前，請檢查您是否擁有在準備好的環境中執行徹底的非功能性測試所需的一切。
在開始非功能性測試之前，請按照下面的清單瞭解提示和技巧。
1. 按計劃工作
無論是將其包含在測試計劃中還是為其創建單獨的文檔，都可以圍繞測試計劃構建軟體測試。
如果您發現的錯誤和缺陷比預期的要多，有時可能會偏離時程表，但是有一個時程表可以説明指導測試人員並激勵他們高效工作，尤其是在執行耗時的手動測試時。
2. 確定您的測試團隊
委派職責併為測試團隊成員分配正式角色和頭銜有助於確保測試過程順利進行。
在測試開始之前，清楚地傳達團隊中的角色和職責，並分配不同的測試人員負責非功能性測試的不同方面，以便每個人都對自己的任務負責。
3. 測試前選擇工具和技術
如果您只在開始非功能性測試后決定使用特定的工具和技術，這可能會阻礙測試過程並導致測試人員混淆。
相反，請提前進行研究，並在測試開始之前決定是否要使用任何工具。 這樣可以輕鬆地將這些工具合併到測試計劃中，並培訓測試人員在測試開始之前使用它們。
4. 始終獲得測試和文檔的正式簽核
測試是一個品質保證過程，最大化所執行測試價值的最佳方法是對您計劃和運行的測試執行基本的 QA。
引入簡單的協定，要求測試人員要求 QA 主管和經理在進入下一階段之前審查並簽署測試計劃和測試報告。
這大大增加了測試錯誤被發現並儘早修復的機會。
實施非功能性測試時要避免的7個錯誤和陷阱
如果你不熟悉非功能性測試，很容易犯一些測試人員和QA專業人員經常陷入的常見錯誤。
非功能性測試是一項複雜的工作，涉及從各個角度和角度考慮軟體構建。
下面列出了測試人員在執行非功能測試時遇到的一些最常見的陷阱。
1. 不規劃
如果您不熟悉非功能測試，您可能會認為您可以直接進入測試階段，而無需提前創建全面的測試計劃。
一些測試團隊可能會將不完整的測試文檔或測試計劃的膚淺摘要放在一起，這些文檔或測試計劃沒有充分概述測試人員在非功能性測試期間必須採取的行動。
2. 測試管理不善
如果在測試過程的任何階段測試管理不善，都可能出現問題。 管理不善可能意味著測試人員沒有適當的資源來徹底執行測試，或者測試人員沒有足夠的時間來測試構建的各個方面。
測試經理必須能夠從他們所犯的錯誤中吸取教訓，並制定更有效的測試計劃。
3. 溝通不暢
溝通不暢會在測試過程中導致很多問題，特別是在非功能性測試中。
這可能意味著測試團隊內部溝通不暢，或者測試人員、開發人員和利益相關者之間的溝通不暢。
當測試人員在測試過程中沒有充分維護測試文檔或沒有定期與其他部門溝通時，通常會發生這種情況。
4. 忽略開發人員
測試人員和開發人員通常彼此分開工作，但與開發人員密切合作的測試團隊可以從有關軟體如何運行以及不同模組如何相互交互的其他知識中受益。
讓開發人員參與測試過程，或在關鍵時刻請求開發人員提供反饋，可以幫助測試團隊制定更高效、更全面的測試計劃。
5. 測試目的
許多測試人員仍然認為，測試的目的是檢查軟體是否有效，或向利益相關者和投資者證明該軟體是否有效。
相反，測試人員應該以測試的目的是尋找缺陷的態度來進行測試。
沒有發現缺陷的測試人員可以很高興他們正在測試的軟體沒有錯誤，只有當他們滿意地查看了可能發現缺陷的任何地方時。
6. 手動與自動化錯誤
花時間考慮手動測試或自動測試對於您執行的每種類型的測試是否更好，這一點很重要。
自動化測試方法非常適合幾乎所有形式的非功能性測試，習慣於功能測試的測試團隊可能會錯誤地認為他們可以同樣輕鬆地手動測試非功能性特性。
7. 使用錯誤的測試工具
在開始非功能性測試之前，很容易選擇錯誤的測試工具和技術，特別是如果測試團隊習慣於執行手動測試並且不習慣使用測試工具。
提前研究要使用的非功能測試方法，並選擇滿足專案特定要求的軟體工具和自動化工具。
結論
非功能測試是測試過程中必不可少的步驟，它使測試人員能夠驗證系統的性能以及它在多大程度上滿足非功能性要求，如載入時間、容量和安全保障。
執行非功能性測試的方法有很多種，但現代自動化工具可以更輕鬆地最大限度地提高測試覆蓋率和準確性，而不會影響結果的品質。
常見問題和資源
如果您想瞭解有關非功能測試的更多資訊，網上有很多常見問題解答和資源。
流覽下面我們最喜歡的在線非功能測試資源，或閱讀有關非功能測試的一些最常見問題的答案。
1. 非功能測試的最佳課程
網上有很多課程可以幫助您擴展對非功能性測試方法和方法的瞭解。
其中一些課程是免費提供的，而其他課程可能會提供證書或資格以換取費用。 如果您想參加認可的課程，您可以詢問您的僱主是否會贊助您並支付學費。
關於非功能測試的一些最佳課程包括：
- TSG：非功能性訓練2天課程
- Udemy：完整的 2023 年軟體測試訓練營
- Edx：軟體測試專業證書
- 教育：性能測試自動化 101
2. 關於非功能測試的前 5 個面試問題是什麼？
如果您正在準備從事軟體測試工作的工作面試，您的面試官可能會問您有關非功能性測試的問題，以確保您了解軟體測試的這一重要階段是如何工作的。 通過提前準備好常見面試問題的有效答案來準備面試。
● 您在非功能測試中使用的方法和方法與在功能測試中使用的方法有何不同？
● 非功能測試與功能測試有何不同？
● 存在哪些不同類型的非功能測試？
● 您如何確定功能測試和測試案例的優先順序？
● 通常在軟體測試的哪個階段進行功能測試？
3. 關於非功能測試的最佳 YouTube 教程
如果您更喜歡通過觀看視頻來學習，您可能會發現YouTube 關於非功能測試的教程是瞭解有關此類軟體測試的更多資訊的有用方法。
以下是當今可用的一些關於軟體測試的最佳YouTube教程。
什麼是非功能性軟體測試？ 軟體測試教程
軟體測試説明：非功能性測試
軟體測試中的非功能性測試
訪問W3學校
功能和非功能測試
4. 如何維護非功能測試
適當的測試維護可確保在不影響測試結果質量的情況下重複軟體測試。
通過維護非功能性測試，您可以確保在開發過程的每個階段進行測試都是充分的，並且您的測試始終根據不斷變化的代碼進行更新。
您可以按照以下提示維護非功能測試。
● 在創建測試用例和編寫文檔時，在整個測試團隊中進行清晰的溝通
● 始終遵循最佳測試設計實踐
● 在測試過程的各個階段重新評估測試協定
● 隨時更新測試中的更改
在更改當前測試時考慮未來的專案
5. 非功能測試是黑盒測試還是白盒測試？
非功能測試是一種黑盒測試，這意味著測試人員不關心系統的內部工作，而只關心其外部輸出。
這與白盒測試形成鮮明對比，白盒測試測試系統內部的工作方式。 白盒測試的範例包括單元測試和整合測試。
功能和非功能需求測試是黑盒測試的範例。 這意味著測試人員不需要高級技術技能或計算機程式設計知識來進行黑盒測試，也不需要學習如何實現他們正在測試的系統。
