App測試方法總結

1、安全測試

1.軟件權限

1）扣費風險：包括短信、撥打電話、鏈接網絡等。

2）隱私泄露風險：包括訪問手機信息、訪問聯繫人信息等。

3）對App的輸入有效性校驗、認證、受權、數據加密等方面進行檢測

4）限制/容許使用手機功能接入互聯網

5）限制/容許使用手機發送接收信息功能

6）限制或使用本地鏈接

7）限制/容許使用手機拍照或錄音

8）限制/容許使用手機讀取用戶數據

9）限制/容許使用手機寫入用戶數據

10）限制/容許應用程序來註冊自動啓動應用程序

2.安裝與卸載安全性

1）應用程序應能正確安裝到設備驅動程序上

2）可以在安裝設備驅動程序上找到應用程序的相應圖標

3）安裝路徑應能指定

4）沒有用戶的容許，應用程序不能預先設定自動啓動

5）卸載是否安全，其安裝進去的文件是否所有卸載

6）卸載用戶使用過程當中產生的文件是否有提示

7）其修改的配置信息是否復原

8）卸載是否影響其餘軟件的功能

9）卸載應該移除全部的文件

3.數據安全性

1）當將密碼或其它的敏感數據輸入到應用程序時，其不會被存儲在設備中，同時密碼也不會被解碼。

2）輸入的密碼將不以明文形式進行顯示。

3）密碼、信用卡明細或其餘的敏感數據將不被存儲在它們預輸入的位置上。

4）不一樣的應用程序的我的身份證或密碼長度必須至少在4-8個數字長度之間。

5）當應用程序處理信用卡明細或其它的敏感數據時，不以明文形式將數據寫到其餘單獨的文件或者臨時文件中。以防止應用程序異常終止而又沒有刪除它的臨時文件，文件可能遭受入侵者的襲擊，而後讀取這些數據信息。

6）黨建敏感數據輸入到應用程序時，其不會被存儲在設備中。

7）應用程序應考慮或者虛擬機器產生的用戶提示信息或安全警告

8）應用程序不能忽略系統或者虛擬機器產生的用戶提示信息或安全警告，更不能在安全警告顯示前，利用顯示誤導信息欺騙用戶，應用程序不該該模擬進行安全警告誤導用戶。

9）在數據刪除以前，應用程序應當通知用戶或者應用程序提供一個「取消」命令的操做。

10）應用程序應當可以處理當不容許應用軟件鏈接到我的信息管理的狀況。

11）當進行讀或寫用戶信息操做時，應用程序將會向用戶發送一個操做錯誤的提示信息。

12）在沒有用戶明確許可的前提下不損壞刪除我的信息管理應用程序中的任何內容。

13）若是數據庫中重要的數據正要被重寫，應及時告知用戶。

14）能合理的處理出現的錯誤。

15）意外狀況下應提示用戶。

4.通信安全性

1）在運行軟件過程當中，若是有來電、SMS、藍牙等通信或充電時，是否能暫停程序，優先處理通訊，並在處理完畢後能正常恢復軟件，繼續其原來的功能。

2）當創立鏈接時，應用程序可以處理由於網絡鏈接中斷，進而告訴用戶鏈接中斷的狀況。

3）應能處理通信延時或中斷。

4）應用程序將保持工做到通信超時，進而給用戶一個錯誤信息指示有連接錯誤。

5）應能處理網絡異常和及時將異常狀況通報用戶。

6）應用程序關閉網絡鏈接再也不使用時應及時關閉，斷開。

5.人機接口安全測試

1）返回菜單應總保持可用。

2）命令有優先權順序。

3）聲音的設置不影響使用程序的功能。

4）聲音的設置不影響應用程序的功能

5）應用程序必須可以處理不可預知的用戶操做，例如錯誤的操做和同時按下多個鍵。

2、安裝、卸載測試

驗證App是否能正確安裝、運行、卸載、以及操做過程和操做先後對系統資源的使用狀況

1.安裝

1）軟件安裝後是否可以正常運行，安裝後的文件夾以及文件是否寫到了指定的目錄裏。

2）軟件安裝各個選項的組合是否符合概要設計說明。

3）軟件安裝嚮導的UI測試

4）安裝後沒有生成多餘的目錄結構和文件。

2.卸載

1）測試系統直接卸載程序是否有提示信息。

2）測試卸載後文件是否所有刪除全部的安裝文件夾。

3）卸載是否支持取消功能，單擊取消後軟件卸載的狀況。

4）系統直接卸載UI測試，是否有卸載狀態進度條提示。

3、UI測試

1）測試用戶界面（如菜單、對話框、窗口和其餘控件）佈局、風格是否知足要求、文字是否正確、頁面是否美觀、文字、圖片組合是否完美、操做是否友好等。

2）UI測試的目標是確保用戶界面會經過測試對象的功能來爲用戶提供相應的訪問或瀏覽功能。確保用戶界面符合公司或行業的標準。包括用戶友好性、人性化、易操做性測試。

1.導航測試

1）按鈕、對話框、列表和窗口等；或在不一樣的鏈接頁面之間須要導航。

2）是否易於導航，導航是否直觀。

3）是否須要搜索引擎。

4）導航幫助是否準確直觀。

5）導航與頁面結構、菜單、鏈接頁面的風格是否一致。

2.圖形測試

1）橫向比較，各控件操做方式統一。

2）自適應界面設計，內容根據窗口大小自適應。

3）頁面標籤風格是否統一。

4）頁面是否美觀。

5）頁面的圖片應有其實際意義而要求總體有序美觀。

3.內容測試

1）輸入框說明文字的內容與系統功能是否一致。

2）文字長度是否加以限制。

3）文字內容是否表意不明。

4）是否有錯別字。

5）信息是否爲中文顯示。

4、功能測試

根據軟件說明或用戶需求驗證App的各個功能實現，採用以下方法實現並評估功能測試過程：

1）採用時間、地點、對象、行爲和背景五元素或業務分析等方法分析、提煉App的用戶使用場景，對比說明或需求，整理出內在、外在及非功能直接相關的需求，構建測試點，並明確測試標準。

2）根據被測功能點的特性列出相應類型的測試用例對其進行覆蓋，如：設計輸入的地方須要考慮等價、邊界、負面、異常、非法、場景回滾、關聯測試等測試類型對其進行覆蓋。

3）在測試實現的各個階段跟蹤測試實現與需求輸入的覆蓋狀況，及時修正業務或需求理解錯誤。

1.運行

1）App安裝完成後的試運行，可正常打開軟件。

2）App打開測試，是否有加載狀態進度提示。

3）App頁面間的切換是否流暢，邏輯是否正確。

4）註冊

• 同表單編輯頁面
• 用戶名密碼長度
• 註冊後的提示頁面
• 前臺註冊頁面和後臺的管理頁面數據是否一致
• 註冊後，在後臺管理中頁面提示

5）登陸

• 使用合法的用戶登陸系統
• 系統是否容許屢次非法的登陸，是否有次數限制
• 使用已經登陸的帳號登陸系統是否正確處理
• 用戶名、口令（密碼）錯誤或漏填時可否登錄
• 刪除或修改後的用戶，原用戶名登錄
• 不輸入用戶口令和重複點「肯定/取消」按鈕，是否容許登陸
• 登錄後，頁面中登陸信息
• 頁面中有註銷按鈕
• 登陸超時的處理

2.應用的先後臺切換

1）App切換到後臺，再回到App，檢查是否停留在上一次操做界面。

2）App切換到後臺，再回到App，檢查功能及應用狀態是否正常。

3）App切換到後臺，再回到前臺時，注意程序是否崩潰，功能狀態是否正常，尤爲是對於從後臺切換回前臺數據有自動更新的時候。

4）手機鎖屏解鎖後進入App注意是否會崩潰，功能狀態是否正常，尤爲是對於從後臺切換回前臺數據有自動更新的時候。

5）當App使用過程當中有電話進來中斷後再切換到App，功能狀態是否正常。

6）當殺掉App進城後，再開啓App，App可否正常啓動。

7）出現必須處理的提示框後，切換到後臺，再切換回來，檢查提示框是否還存在，有時候會出現應用自動跳過提示框的缺陷。

8）對於有數據交換的頁面，每一個頁面都必需要進行先後臺切換、鎖屏的測試，這種頁面最容易出現崩潰。

3.免登錄

不少應用提供免登錄功能，當應用開啓時自動以上一次登陸的用戶身份來使用App。

1）考慮無網絡狀況時可否正常進入免登陸狀態。

2）切換用戶登錄後，要校驗用戶登陸信息以及數據內容是否相應更新，確保原用戶退出。

3）根據Mtop的現有規則，一個帳戶只容許登錄一臺機器。因此，須要檢查一個帳戶登陸多臺手機的狀況。原手機裏的用戶須要被退出，給出友好提示。

4）App切換到後臺，在切換回前臺的校驗。

5）切換到後臺，再切換回到前臺的測試。

6）密碼更換後，檢查有數據交換時是否進行了有效身份的校驗。

7）支持自動登陸的應用在進行數據校驗時，檢查系統是否能自動登陸成功而且數據操做無誤。

8）檢查用戶主動退出登陸後，下次啓動App，應停留在登陸界面。

4.離線瀏覽

不少應用會支持離線瀏覽，即在本地客戶端會緩存一部分數據供用戶查看。

1）在無線網絡狀況能夠瀏覽本地數據。

2）退出App再開啓App時能正常瀏覽。

3）切換到後臺再回到前臺能夠正常瀏覽。

4）鎖屏後再解鎖回到應用前臺能夠正常瀏覽。

5）在對服務器段的數據有更新時回給予離線的相應提示。

5.App更新

1）當客戶端有新版本時，有更新提示。

2）當版本爲非強制升級版時，用戶能夠取消更新，老版本能正常使用。用戶在下次啓動App時，仍出現更新提示。

3）當版本爲強制升級版時，但給出強制更新後用戶沒有作更新時，退出客戶端。下次啓動App時，仍出現強制升級提示。

4）當客戶端有新版本時，在本地不刪除客戶端的狀況下，直接更新檢查是否能正常更新。

5）當客戶端有新版本時，在本地不刪除客戶端的狀況下，檢查更新後的客戶端功能是不是新版本。

6）當客戶端有新版本時，在本地不刪除客戶端的狀況下，檢查資源同名文件如圖片是否能正常更新成最新版本。若是以上沒法更新成功的，也都屬於缺陷。

6.定位、照相機服務

1）App有用到相機，定位服務時，須要注意系統版本差別。

2）有用到照相機服務的地方，須要進行先後臺的切換測試，檢查應用是否正常。

3）測試照相機服務時，須要採用真機進行測試。

7.PUSH測試

1）檢查Push消息是否按照指定的業務規則發送。

2）檢查不接收推送消息時，用戶不會在接收到Push消息。

3）若是用戶設置了免打擾的時間段，檢查在免打擾時間段內，用戶接收不到Push。在非免打擾時間段內，用戶能正常收到Push。

4）當Push消息是針對登陸用戶的時候，須要檢查收到的Push與用戶身份是否相符，沒有錯誤的將其餘人的消息推送過來。通常狀況下，只對手機上最後一個登陸用戶進行消息推送。

5）測試Push時，須要採用真機進行測試。

5、性能測試

1）響應能力測試：測試App中的各種操做是否知足用戶響應時間要求。

• App安裝、卸載的響應時間
• App各種功能性操做的響應時間

2）壓力測試，反覆/長期操做下，系統資源是否佔用異常。

• App反覆進行安裝卸載，檢查系統資源是否正常
• 其餘功能反覆進行操做，檢查系統資源是否正常

6、交叉事件測試

針對智能終端應用的服務等級劃分方式及實時特性所提出的測試方法。交叉測試又叫事件或衝突測試，是指一個功能正在執行過程當中，同時另一個事件或操做對該過程進行干擾的測試。如：App在前/後臺運行狀態時與來電、文件下載、音樂收聽等關鍵運用的交互狀況測試等。

交叉事件測試很是重要，能發現不少應用中潛在的性能問題。

1）多個App同時運行是否影響正常功能。

2）App運行時前/後臺切換是否影響正常功能。

3）App運行時撥打/接聽電話。

4）App運行時發送/接收信息。

5）App運行時發送/收取郵件。

6）App運行時瀏覽網絡。

7）App運行時使用藍牙傳送/接收數據。

8）App運行時使用相機、計算器等手機自帶設備。

7、兼容測試

主要測試內部和外部兼容性

1）與本地及主流App是否兼容

2）與各類設備是否兼容，如有跨系統支持則須要檢驗是否在個系統下，各類行爲是否一致。

• 不一樣手機屏幕分標率的兼容性
• 不一樣手機品牌的兼容性

8、迴歸測試

1）Bug修復後且在新版本發佈後須要進行迴歸測試。

2）Bug修復後的迴歸測試在交付前、要進行大量用例的迴歸測試。

9、用戶體驗測試

以主觀的普通消費者的角度去感知產品或服務的溫馨、有用、易用、友好親切程度。經過不一樣個體、獨立空間和非經驗的統計複用方式去有效評價產品的體驗特性，提出修改意見提高產品的潛在客戶滿意度。

1）是否有空數據界面設計，引導用戶去執行操做。

2）是否濫用用戶引導。

3）是否有不可點擊的效果，如：你的按鈕此時處於不可用狀態，那麼必定要灰掉，或者拿掉按鈕，不然會給用戶誤導。

4）菜單層次是否太深。

5）交互流程分支是否太多。

6）相關的選項是否離的很遠。

7）一次是否載入太多的數據。

8）界面中按鈕可點擊範圍是否適中。

9）標籤頁是否跟內容沒有從屬關係，當切換標籤的時候，內容跟着切換。

10）操做應該有主次從屬關係。

11）是否認義Back的邏輯。涉及軟硬件交互時，Back鍵應具體定義。

12）是否有橫屏模式的設計，應用通常須要支持橫屏模式，即自適應設計。

10、手勢操做測試

1）手機開鎖屏對運行中的App的影響。

2）運行中的App先後臺切換的影響。

3）多個運行中的App的切換。

4）App運行時關機。

5）App運行時重啓系統。

6）App運行時充電

7）App運行時Kill掉進程再打開

11、客戶端數據庫測試

1）通常的增、刪、改、查測試。

2）當表不存在時是否能自動建立，當數據庫表被刪除後可否再自建，數據是否還能自動從服務器中獲取回來並保存。

3）在業務須要從服務器端取回數據保存到客戶端的時候，客戶端可否將數據保存到本地。

4）當業務須要從客戶端取數據時，檢查客戶端數據存在時，App數據是否能自動從客戶端數據中取出，仍是仍然會從服務器端獲取？檢查客戶端數據不存在時，App數據可否自動從服務器端獲取到並保存到服務器端。

5）當業務對數據進行了修改、刪除後，客戶端和服務器端是否會有相應的更新。