用戶測試腳本
❶ 自動化測試腳本的基本功能有哪些
自動化測試腳本的基本功能有腳本語言,對象識別,自動執行和結果判斷。
1、測試需求分析階段。測試需求分析階段主要工作是獲得測試項目的測試需求(測試規格)。輸出產物:《可測試性需求說明書》和《測試規格》。
2、測試計劃階段。以測試需求為基礎,分析產品的總體測試策略。輸出產物:《產品總體測試策略》。

Test Partner:
它使測試人員和開發人員都可以使用可視的腳本編制和自動向導來生成可重復的測試,用戶可以調用VBA的所有功能,並進行任何水平層次和細節的測試。TestPartner的腳本開發採用通用的、分層的方式來進行。
沒有編程知識的測試人員也可以通過TestPartner的可視化導航器來快速創建測試並執行。通過可視的導航器錄制並回放測試,每一個測試都將被展示為樹狀結構,以清楚地顯現測試通過應用的路徑。
❷ 什麼是UAT測試
UAT,(UserAcceptanceTest),也就是用戶驗收測試,或用戶可接受測試,系統開發生命周期方法論的一個階段,這時相關的用戶或獨立測試人員根據測試計劃和結果對系統進行測試和接收。
它讓系統用戶決定是否接收系統,它是一項確定產品是否能夠滿足合同或用戶所規定需求的測試,這是管理性和防禦性控制。
(2)用戶測試腳本擴展閱讀
執行步驟
1、用戶培訓手冊准備。
指針對要進行UAT測試的對象,及要進行培訓的用戶,准備一些培訓資料。
一般是測試對象使用/功能手冊及要培訓的用戶的個人資料等等,跟教師上課進行備課差不多。
2、測試腳本發放。
如果公司採用自動化測試,那麼每一個功能或一個模塊等都有對應的測試腳本,可以把這些測試腳本分發給特定的人員;如果採用手工測試,就要把詳細描述一個功能或模塊的文檔分給相關人員(當然自動化測試也要分發)。
3、用戶補充業務測試場景和測試數據。
請有代表性的一些最終用戶根據實際應用環境及一些常用處理的數據,來給一些補充與建議,越貼近實際應用越好。
4、顧問補充測試步驟。
可以請項目專家,測試經理,或專門的測試,開發等顧問對測試步驟進行補充。
5、培訓資料及測試腳本文檔的確定與最終輸出。
一般到此,各種資料都基本確定,這時可以將它們進行列印,或形成特別的電子文檔。
6、測試策略的制定。
如嵌入測試策略等。
7、測試用戶的確定。
大體上從培訓人員中選取,因為不是每個接受培訓的人員都能有資格去測試的,這里你可以通過一些考核來實現人員的篩選等等。
8、由專門的測試組織機構確定測試地點,並發出通知。
9、測試網路環境的搭建和保障。
包括網路,系統,硬軟體,包括一些用例工具等。
10、組織進行測試。
11、評審分析提交的問題。
這就進入了一般bug處理過程,形成了一個循環。
UAT測試的重點體現
1、培訓的資料表述要准確全面,易懂等(這是理論基礎)
2、人員選擇,要典型有代表性(用戶基礎)
3、測試流程步驟(要周密)
4、測試策略制定(確定一個適合測試對象及測試人員的測試策略)
5、問題的表達與處理(因為測試者不是專業開發測試人員,對於問題的表達可能不能到位,或根本就不是那種問題,這就存在如何復現與轉化問題等)
❸ 怎麼用python對qq登錄界面寫測試腳本
1. 用Python封裝被測試介面,對於HTTP介面我們通常會採用 GET和POST 2種調用方式去訪問,所以必須把這2種方式都封裝進去
# -*- coding:gb2312 -*-
import urllib2,urllib
'''
函數說明:url 特殊字元編碼轉換
作者:xiaonan
輸入參數:待轉換的字元串數據
輸出參數:轉換完成後的字元串數據
'''
def urlcode(data):
return urllib2.quote(str(data))
'''
函數說明:獲取用戶信息的API介面
作者:xiaonan
輸入參數:用戶名(uname),HTTP介面調用方式(GET或者POST)
輸出參數:HTTP介面調用返回數據
'''
def GetUserInfo(uname,method):
if method == 'GET':
url = 'http://ip:port/interface/GetUserInfo.php?uname='+urlcode(uname)
result = urllib2.urlopen(url).read()
return result
if method == 'POST':
url = 'http://ip:port/interface/GetUserInfo.php'
values = {'uname' : uname}
data = urllib.urlencode(values)
req = urllib2.Request(url, data)
response = urllib2.urlopen(req)
result = response.read()
return result
2. 編寫、組織測試腳本, 准備測試數據
根據Testcase的具體業務邏輯用事先准備好的測試數據去調用封裝好的API介面,驗證實際返回結果是否與預期返回結果一致.
測試數據可以以各種形式存放,如Excel數據表:
TestCaseName uname method Expected Result
TestCase1 aaaa GET ....
TestCase2 aaaa POST ....
TestCase3 bbbb GET ....
... ... ... ....
# -*- coding:gb2312 -*-
import xlrd
'''
函數說明: Testcase 腳本
作者:xiaonan
輸入參數:測試數據,API介面
輸出參數:測試日誌,測試報告
'''
def GetUser():
bk = xlrd.open_workbook(excel文件名稱) # 打開excel文件
sh = bk.sheet_by_name(excel表名)# 打開excel表
nrows = sh.nrows # 獲取總行數
for i in range(1,nrows):
TestCase = sh.cell_value(i,0)
uname = sh.cell_value(i,1)
method = sh.cell_value(i,2)
EX_Result=sh.cell_value(i,3)
WriterLog('Testcase Name:'+TestCase+'TestData: uname = '+uname+' ,method = '+method+' ,EX_Result = ' + ,EX_Result) # 寫測試日誌
AC_result = GetUserInfo(uname,method) # 調用API介面
WriterLog('AC_result = ' + AC_result) # 寫測試日誌
if EX_Result == AC_result: #實際結果與預期結果對比
WriterLog(...) #寫測試日誌
WriterReport(...)#寫測試報告
else
WriterLog(...)#寫測試日誌
WriterReport(...)#寫測試報告
3. 組織測試套,用驅動文件去調用執行所有測試套件,完成相關測試,並生成測試日誌及測試報告.
# -*- coding:gb2312 -*-
'''
函數說明: Testsuit Driver驅動腳本
作者:xiaonan
輸入參數:TestCase 腳本
輸出參數:測試日誌,測試報告
'''
if __name__ == '__main__':
...
WriterLog() #寫測試日誌
GetUser() # TestCase 腳本
...
...
Report(....) # 統計匯總所有測試報告數據,以文件或頁面形式呈現.
4. 執行測試腳本,分析測試結果. 根據測試報告,如果有Bug則提交.
❹ APP怎麼檢測腳本
APP檢測主要從以下幾個方面展開:
APP性能測試和監控:極限測試:在各種邊界壓力情況下(如:電池、存儲、網速等),驗證App是否能正確響應。響應能力測試:測試App中的各類操作是否滿足用戶響應時間要求壓力測試:反復/長期操作下,系統資源是否佔用異常;性能評估:評估典型用戶應用場景下,系統資源的使用情況。Benchmark測試(基線測試):與競爭產品的Benchmarking,產品演變對比測試等。
至於如何寫檢測腳本,1.可以再Saas平台選擇上百款真實機型,根據需要可進行調用哪一個雲真機2.在SaaS平台的雲端上傳APP,方便統一管理;無需編寫代碼,開始錄制腳本,並自動生成腳本步驟3.APP測試的腳本寫的對不對,還是要回放看一看的
❺ APP兼容性測試腳本怎麼寫
兼容性測試,你需要根據測試用例,編寫測試腳本,根據用戶給出的測試用例,編寫可以自動化執行的測試腳本。測試用例的樣式,可以是word或者excel格式的。
兼容性測試:就是讓APP、小程序、H5程序,在所有的設備上進行適配,兼容性測試,發現潛在的問題。
app兼容性測試使用方法:
1) 登陸您的TestBird賬戶,進入APP測試系統,如果沒有賬號可以直接注冊一個。
2)點擊右上角的「新建測試任務」
3)填寫測試需求
4)選擇測試機型後創建應用的版本
5)上傳APK包,開始測試
6)任務上傳成功,可以隨時查看測試進展
❻ 軟體功能測試流程
1、測試計劃:測試計劃一般由測試經理編寫,根據需求估算測試所需資源(人力,設備等)、所需時間、功能點劃分、如何合理分配安排資源。
2、用例設計:根據測試計劃,修改好的需求分析文檔開始寫測試用例,同時開發人員完成概要設計文檔和詳細設計文檔。測試人員根據這兩份文檔補充測試用例。
3、測試環境:測試人員搭建測試環境。
4、執行測試:開發人員提交第一個版本,如果存在未完成的功能,開發需跟測試人員說明,然後測試人員根據測試用例的詳細步驟,執行測試用例,發現BUG提交缺陷庫。
5、BUG跟蹤:開發人員提交第二個版本,包括修改的BUG以及增加的部分功能,測試人員進行第二輪測試和回歸測試,跟蹤BUG直到關閉。
6、測試報告:通過不斷測試,BUG跟蹤,直到用例全部測試,覆蓋率、缺陷率以及其他各項指標達到質量標准,即達到上線要求。

(6)用戶測試腳本擴展閱讀:
功能測試根據產品特性、操作描述和用戶方案,測試一個產品的特性和可操作行為以確定它們滿足設計需求。本地化軟體的功能測試,用於驗證應用程序或網站對目標用戶能正確工作。使用適當的平台、瀏覽器和測試腳本,以保證目標用戶的體驗將足夠好。
功能測試是為了確保程序以期望的方式運行而按功能要求對軟體進行的測試,通過對一個系統的所有的特性和功能都進行測試確保符合需求和規范。只需考慮需要測試的各個功能,不需要考慮整個軟體的內部結構及代碼。
❼ 如何使用Bash Shell腳本進行功能測試
在本文中,Angel Rivera 將說明如何運用 Bash shell 腳本通過行命令來執行 Linux 應用程序的功能測試。由於此腳本依賴於命令行的返回碼,因而您不能將這種方法運用於 GUI 應用程序 功能測試是開發周期的一個階段,在這個階段中將測試軟體應用程序以確保軟體的函數如預期的那樣,同時能正確處理代碼中錯誤。此項工作通常在單個模塊的單元測試結束之後,在負載/重壓條件下整個產品的系統測試之前進行的。 市場上有許多測試工具提供了有助於功能測試的功能。然而,首先要獲取它們,然後再安裝、配置,這將佔用您寶貴的時間和精力。Bash 可以幫您免去這些煩瑣的事從而可以加快測試的進程。 使用Bash shell 腳本進行功能測試的優點在於: Bash shell 腳本已經在 Linux 系統中安裝和配置好了。不必再花時間准備它。 可以使用由 Linux 提供的文本編輯器如 vi 創建和修改 Bash shell 腳本。不需要再為創建測試程序而獲取專門的工具。 如果已經知道了如何開發 Bourne 或 Korn shell 腳本,那對於如何運用 Bash shell 腳本已經足夠了。對您來說,學習曲線已不存在了。 Bash shell 提供了大量的編程構造用於開發從非常簡單到中等復雜的腳本。 將腳本從 Korn 移植到 Bash 時的建議 如果已有現成的 Korn shell 腳本,而想要將它們移植到 Bash,就需要考慮下列情況: Korn 的 "print" 命令在 Bash 中不能使用;而是改為使用 "echo" 命令。 需要將腳本的第一行: #!/usr/bin/ksh 修改成: #!/bin/bash 創建Bash shell 腳本進行功能測試 這些基本的步驟和建議適用於許多在 Linux 上運行的客戶機/伺服器應用程序。 記錄運行腳本的先決條件和主要步驟 將操作分成若干個邏輯組 基於一般方案制定執行步驟 在每個 shell 腳本中提供注釋和說明 做一個初始備份以創建基準線 檢查輸入參數和環境變數 嘗試提供 "usuage" 反饋 嘗試提供一個「安靜」的運行模式 當出現錯誤時,提供一個函數終止腳本 如可能,提供可以執行單個任務的函數 當顯示正在生成的輸出時,捕獲每個腳本的輸出 在每個腳本內,捕獲每個行命令的返回碼 計算失敗事務的次數 在輸出文件中,突出顯示錯誤消息,以便於標識 如有可能,「實時」生成文件 在執行腳本的過程中提供反饋 提供腳本執行的摘要 提供一個容易解釋的輸出文件 如有可能,提供清除腳本及返回基準線的方法 下面詳細講述了每一條建議以及用於說明問題的腳本。若要下載此腳本,請參閱本文後面的 參考資料部分。 1. 記錄運行腳本的先決條件和主要步驟 記錄,尤其是以有自述標題的單個文件(例如 "README-testing.txt")記錄功能測試的主要想法是很重要的,包括,如先決條件、伺服器和客戶機的設置、腳本遵循的整個(或詳細的)步驟、如何檢查腳本的成功/失敗、如何執行清除和重新啟動測試。 2. 將操作分成若干個邏輯組 如果僅僅執行數量非常少的操作,可以將它們全部放在一個簡單的 shell 腳本中。 但是,如果需要執行一些數量很多的操作,那最好是將它們分成若干個邏輯集合,例如將一些伺服器操作放在一個文件而將客戶機操作放在在另一個文件中。通過這種方法,劃分適當的顆粒度來執行測試和維護測試。 3. 基於一般方案制定執行步驟 一旦決定對操作進行分組,需要根據一般方案考慮執行操作的步驟。此想法是模擬實際生活中最終用戶的情形。作為一個總體原則,只需集中測試 80% 最常調用函數的 20% 用法即可。 例如,假設應用程序要求 3 個測試組以某個特定的順序排列。每個測試組可以放在一個帶有自我描述文件名(如果可能)的文件中,並用號碼來幫助識別每個文件的順序,例如: 1. fvt-setup-1: To perform initial setup. 2. fvt-server-2: To perform server commands. 3. fvt-client-3: To perform client commands. 4. fvt-cleanup: To cleanup the temporary files, in order to prepare for the repetition of the above test cases. 4. 在每個 shell 腳本中提供注釋和說明 在每個 shell 腳本的頭文件中提供相關的注釋和說明是一個良好的編碼習慣。這樣的話,當另一個測試者運行該腳本時,測試者就能清楚地了解每個腳本中測試的范圍、所有先決條件和警告。 下面是一個 Bash 腳本 "test-bucket-1" 的示例 。 #!/bin/bash # # Name: test-bucket-1 # # Purpose: # Performs the test-bucket number 1 for Proct X. # (Actually, this is a sample shell script, # which invokes some system commands # to illustrate how to construct a Bash script) # # Notes: # 1) The environment variable TEST_VAR must be set # (as an example). # 2) To invoke this shell script and redirect standard # output and standard error to a file (such as # test-bucket-1.out) do the following (the -s flag # is "silent mode" to avoid prompts to the user): # # ./test-bucket-1 -s 2>&1 | tee test-bucket-1.out # # Return codes: # 0 = All commands were successful # 1 = At least one command failed, see the output file # and search for the keyword "ERROR". # ######################################################## 5. 做一個初始備份以創建基準線 您可能需要多次執行功能測試。第一次運行它時,也許會找到腳本或進程中的一些錯誤。因而,為了避免因從頭重新創建伺服器環境而浪費大量時間 -- 特別是如果涉及到資料庫 -- 您在測試之前或許想做個備份。 在運行完功能測試之後,就可以從備份中恢復伺服器了,同時也為下一輪測試做好了准備。 6. 檢查輸入參數和環境變數 最好校驗一下輸入參數,並檢查環境變數是否設置正確。如果有問題,顯示問題的原因及其修復方法,然後終止腳本。 當測試者准備運行腳本,而此時如果沒有正確設置腳本所調用的環境變數,但由於發現及時,終止了腳本,那測試者會相當感謝。沒有人喜歡等待腳本執行了很久卻發現沒有正確設置變數。 # -------------------------------------------- # Main routine for performing the test bucket # -------------------------------------------- CALLER=`basename $0` # The Caller name SILENT="no" # User wants prompts let "errorCounter = 0" # ---------------------------------- # Handle keyword parameters (flags). # ---------------------------------- # For more sophisticated usage of getopt in Linux, # see the samples file: /usr/lib/getopt/parse.bash TEMP=`getopt hs $*` if [ $? != 0 ] then echo "$CALLER: Unknown flag(s)" usage fi # Note quotes around `$TEMP': they are essential! eval set -- "$TEMP" while true do case "$1" in -h) usage "HELP"; shift;; # Help requested -s) SILENT="yes"; shift;; # Prompt not needed --) shift ; break ;; *) echo "Internal error!" ; exit 1 ;; esac done # ------------------------------------------------ # The following environment variables must be set # ------------------------------------------------ if [ -z "$TEST_VAR" ] then echo "Environment variable TEST_VAR is not set." usage fi 關於此腳本的說明如下: 使用語句 CALLER=`basename $0` 可以得到正在運行的腳本名稱。這樣的話,無須在腳本中硬編碼腳本名稱。因此當復制腳本時,採用新派生的腳本可以減少工作量。 調用腳本時,語句 TEMP=`getopt hs $*` 用於得到輸入變數(例如 -h 代表幫助,-s 代表安靜模式)。 語句[ -z "$X" ] 和 echo "The environment variable X is not set." 以及 usage 都是用於檢測字元串是否為空 (-z),如果為空,隨後就執行 echo 語句以顯示未設置字元串並調用下面要討論的 "usage" 函數。 若腳本未使用標志,可以使用變數 "$#",它可以返回正在傳遞到腳本的變數數量。 7. 嘗試提供「usage」反饋 腳本中使用 "usage" 語句是個好主意,它用來說明如何使用腳本。 # ---------------------------- # Subroutine to echo the usage # ---------------------------- usage() { echo "USAGE: $CALLER [-h] [-s]" echo "WHERE: -h = help " echo " -s = silent (no prompts)" echo "PREREQUISITES:" echo "* The environment variable TEST_VAR must be set," echo "* such as: " echo " export TEST_VAR=1" echo "$CALLER: exiting now with rc=1." exit 1 } 調用腳本時,使用「-h」標志可以調用 "usage" 語句,如下所示: ./test-bucket-1 -h 8. 嘗試使用「安靜」的運行模式 您或許想讓腳本有兩種運行模式: 在"verbose" 模式(您也許想將此作為預設值)中提示用戶輸入值,或者只需按下 Enter 繼續運行。 在"silent" 模式中將不提示用戶輸入數據。 下列摘錄說明了在安靜模式下運用所調用標志 "-s" 來運行腳本: # ------------------------------------------------- # Everything seems OK, prompt for confirmation # ------------------------------------------------- if [ "$SILENT" = "yes" ] then RESPONSE="y" else echo "The $CALLER will be performed." echo "Do you wish to proceed [y or n]? " read RESPONSE # Wait for response [ -z "$RESPONSE" ] && RESPONSE="n" fi case "$RESPONSE" in [yY]|[yY][eE]|[yY][eE][sS]) ;; *) echo "$CALLER terminated with rc=1." exit 1 ;; esac 9. 當出現錯誤時,提供一個函數終止腳本 遇到嚴重錯誤時,提供一個中心函數以終止運行的腳本不失為一個好主意。此函數還可提供附加的說明,用於指導在此情況下應做些什麼: # ---------------------------------- # Subroutine to terminate abnormally # ---------------------------------- terminate() { echo "The execution of $CALLER was not successful." echo "$CALLER terminated, exiting now with rc=1." dateTest=`date` echo "End of testing at: $dateTest" echo "" exit 1 } 10. 如有可能,提供可以執行簡單任務的函數 例如,不使用許多很長的行命令,如: # -------------------------------------------------- echo "" echo "Creating Access lists..." # -------------------------------------------------- Access -create -component Development -login ted -authority plead -verbose if [ $? -ne 0 ] then echo "ERROR found in Access -create -component Development -login ted -authority plead" let "errorCounter = errorCounter + 1" fi Access -create -component Development -login pat -authority general -verbose if [ $? -ne 0 ] then echo "ERROR found in Access -create -component Development -login pat -authority general" let "errorCounter = errorCounter + 1" fi Access -create -component Development -login jim -authority general -verbose if [ $? -ne 0 ] then echo "ERROR found in Access -create -component Development -login jim -authority general" let "errorCounter = errorCounter + 1" fi ……而是創建一個如下所示的函數,此函數也可以處理返回碼,如果有必要,還可以增加錯誤計數器: CreateAccess() { Access -create -component $1 -login $2 -authority $3 -verbose if [ $? -ne 0 ] then echo "ERROR found in Access -create -component $1 -login $2 -authority $3" let "errorCounter = errorCounter + 1" fi } ……然後,以易讀和易擴展的方式調用此函數: # ------------------------------------------- echo "" echo "Creating Access lists..." # ------------------------------------------- CreateAccess Development ted projectlead CreateAccess Development pat general CreateAccess Development jim general 11. 當顯示正在生成的輸出時,捕獲每個腳本的輸出 如果腳本不能自動地將輸出發送到文件的話,可以利用 Bash shell 的一些函數來捕獲所執行腳本的輸出,如: ./test-bucket-1 -s 2>&1 | tee test-bucket-1.out 讓我們來分析上面的命令: "2>&1" 命令: 使用"2>&1" 將標准錯誤重定向到標准輸出。字元串 "2>&1" 表明任何錯誤都應送到標准輸出,即 UNIX/Linux 下 2 的文件標識代表標准錯誤,而 1 的文件標識代表標准輸出。如果不用此字元串,那麼所捕捉到的僅僅是正確的信息,錯誤信息會被忽略。 管道"|" 和 "tee" 命令: UNIX/Linux 進程和簡單的管道概念很相似。既然這樣,可以做一個管道將期望腳本的輸出作為管道的輸入。下一個要決定的是如何處理管道所輸出的內容。在這種情況下,我們會將它捕獲到輸出文件中,在此示例中將之稱為 "test-bucket-1.out"。 但是,除了要捕獲到輸出結果外,我們還想監視腳本運行時產生的輸出。為達到此目的,我們連接允許兩件事同時進行的 "tee" (T- 形管道):將輸出結果放在文件中同時將輸出結果顯示在屏幕上。其管道類似於: process --> T ---> output file | V screen 如果 只 想捕獲輸出結果而不想在屏幕上看到輸出結果,那可以忽略多餘的管道: ./test-bucket-1 -s 2>&1 > test-bucket-1.out 假若這樣,相類似的管道如下: process --> output file 12. 在每個腳本內,捕獲每個行命令所返回碼 決定功能測試成功還是失敗的一種方法是計算已失敗行命令的數量,即返回碼不是 0。變數 "$?" 提供最近所調用命令的返回碼;在下面的示例中,它提供了執行 "ls" 命令的返回碼。 # ------------------------------------------- # The commands are called in a subroutine # so that return code can be # checked for possible errors. # ------------------------------------------- ListFile() { echo "ls -al $1" ls -al $1 if [ $? -ne 0 ] then echo "ERROR found in: ls -al $1" let "errorCounter = errorCounter + 1" fi } 13. 記錄失敗事務的次數 在功能測試中決定其成功或失敗的一個方法是計算返回值不是 0 的行命令數量。但是,從我個人的經驗而言,我習慣於在我的 Bash shell 腳本中僅使用字元串而不是整數。在我所參考的手冊中沒有清楚地說明如何使用整數,這就是我為什麼想在此就關於如何使用整數和計算錯誤(行命令失敗)數量的方面多展開講的原因: 首先,需要按如下方式對計數器變數進行初始化: let "errorCounter = 0" 然後,發出行命令並使用 $? 變數捕獲返回碼。如果返回碼不是 0,那麼計數器增加 1(見藍色粗體語句): ListFile() { echo "ls -al $1" ls -al $1 if [ $? -ne 0 ] then echo "ERROR found in: ls -al $1" let "errorCounter = errorCounter + 1" fi } 順便說一下,與其它變數一樣,可以使用 "echo" 顯示整數變數。 14. 在輸出文件中,為了容易標識,突出顯示錯誤消息 當遇到錯誤(或失敗的事務)時,除了錯誤計數器的數量會增加外,最好標識出此處有錯。較理想的做法是,字元串有一個如 ERROR 或與之相似的子串(見藍色粗體的語句),這個子串允許測試者很快地在輸出文件中查找到錯誤。此輸出文件可能很大,而且它對於迅速找到錯誤非常重要。 ListFile() { echo "ls -al $1" ls -al $1 if [ $? -ne 0 ] then echo "ERROR found in: ls -al $1" let "errorCounter = errorCounter + 1" fi } 15. 如有可能,「實時」生成文件 在某些情況下,有必要處理應用程序使用的文件。可以使用現有文件,也可以在腳本中添加語句來創建文件。如果要使用的文件很長,那最好將其作為獨立的實體。如果文件很小而且內容簡單或不相關(重要的一點是文本文件而不考慮它的內容),那就可以決定「實時」創建這些臨時文件。 下面幾行代碼顯示如何「實時」創建臨時文件: cd $HOME/fvt echo "Creating file softtar.c" echo "Subject: This is softtar.c" > softtar.c echo "This is line 2 of the file" >> softtar.c 第一個 echo 語句使用單個的 > 強行創建新文件。第二個 echo 語句使用兩個 >> 將數據附加到現有文件的後面。順便說一下,如果該文件不存在,那麼會創建一個文件。 16. 在執行腳本的過程中提供反饋 最好在腳本中包含 echo 語句以表明它執行的邏輯進展狀況。可以添加一些能迅速表明輸出目的的語句。 如果腳本要花費一些時間執行,那或許應在執行腳本的開始和結束的地方列印時間。這樣可以計算出所花費的時間。 在腳本樣本中,一些提供進展說明的 echo 語句如下所示: # -------------------------------------------- echo "Subject: Proct X, FVT testing" dateTest=`date` echo "Begin testing at: $dateTest" echo "" echo "Testcase: $CALLER" echo "" # -------------------------------------------- # -------------------------------------------- echo "" echo "Listing files..." # -------------------------------------------- # The following file should be listed: ListFile $HOME/.profile ... # -------------------------------------------- echo "" echo "Creating file 1" # -------------------------------------------- 17. 提供腳本執行的摘要 如果正在計算錯誤或失敗事務的次數,那最好表明是否有錯誤。此方法使得測試者在看到輸出文件的最後能迅速地辨認出是否存在錯誤。 在下面的腳本示例中,代碼語句提供了上述腳本的執行摘要: # -------------- # Exit # -------------- if [ $errorCounter -ne 0 ] then echo "" echo "*** $errorCounter ERRORS found ring ***" echo "*** the execution of this test case. ***" terminate else echo "" echo "*** Yeah! No errors were found ring ***" echo "*** the execution of this test case. Yeah! ***" fi echo "" echo "$CALLER complete." echo "" dateTest=`date` echo "End of testing at: $dateTest" echo "" exit 0 # end of file 18. 提供一個容易解釋的輸出文件 在腳本生成的實際輸出中提供一些關鍵信息是非常有用的。那樣,測試者就可以很容易地確定正在查看的文件是否與自己所做的相關以及它是否是當前產生的。附加的時間戳記對於是否是當前狀態是很重要的。摘要報告對於確定是否有錯誤也是很有幫助的;如果有錯誤,那麼測試者就必須搜索指定的關鍵字,例如 ERROR,並確認出個別失敗的事務。 以下是一段輸出文件樣本的片段: Subject: CMVC 2.3.1, FVT testing, Common, Part 1 Begin testing at: Tue Apr 18 12:50:55 EDT 2000 Database: DB2 Family: cmpc3db2 Testcase: fvt-common-1 Creating Users... User pat was created successfully. ... Well done! No errors were found ring the execution of this test case :) fvt-common-1 complete. End of testing at: Tue Apr 18 12:56:33 EDT 2000 當遇到錯誤時輸出文件最後部分的示例如下所示: ERROR found in Report -view DefectView *** 1 ERRORS found ring the execution of this test case. *** The populate action for the CMVC family was not successful. Recreating the family may be necessary before running fvt-client-3 again, that is, you must use 'rmdb', 'rmfamily', 'mkfamily' and 'mkdb -d', then issue: fvt-common-1 and optionally, fvt-server-2. fvt-client-3 terminated, exiting now with rc=1. End of testing at: Wed Jan 24 17:06:06 EST 2001 19. 如有可能,提供清除腳本及返回基準線的方法 測試腳本可以生成臨時文件;假若這樣,最好能讓腳本刪除所有臨時文件。這就會避免由於測試者也許沒有刪除所有臨時文件而引起的錯誤,更糟糕的是將所需要的文件當作臨時文件而刪除了。 運行功能測試的 Bash shell 腳本 本節描述如何運用 Bash shell 腳本進行功能測試。假設您已經執行了在前面部分中所述步驟。 設置必要的環境變數 根據需要在 .profile 中或手工指定下列環境變數。該變數用於說明在腳本中如何處理,所需環境變數的驗證必須在腳本執行前定義。 export TEST_VAR=1 將Bash shell 腳本復制到正確的目錄下 Bash shell 腳本和相關文件需要復制到要進行功能測試的用戶標識的目錄結構下。 登錄進某個帳戶。您應該在主目錄下。假設它是 /home/tester。 為測試案例創建目錄: mkdir fvt 復制Bash shell 腳本和相關文件。獲取壓縮文件(請參閱 參考資料 )並將其放在 $HOME 下。然後將其按下列方式解壓: unzip trfvtbash.zip 為了執行這個文件,更改文件的許可權: chmod u+x * 更改名稱以除去文件的後綴: mv test-bucket-1.bash test-bucket-1 運行腳本 執行下列步驟以運行腳本: 以測試者的用戶標識登錄 更改目錄至所復制腳本的位置: cd $HOME/fvt 從$HOME/fvt 運行腳本: ./test-bucket-1 -s 2>&1 | tee test-bucket-1.out 看一下輸出文件 "test-bucket-1.out" 的尾部並查看摘要報告的結論。 參考資料 您可以參閱本文在 developerWorks 全球站點上的 英文原文. 下載trfvtbash.zip,它包含本文所引用的樣本代碼和工具。該工具在以後有可能會更新。 嘗試用 Info-ZIP 軟體 解開該文件。由於該工具很常用,推薦您最好將解壓和壓縮工具的目錄放至 PATH 中,這樣該機器上的所有用戶都可以使用這個工具。 如何解壓該文件: 為了查看壓縮文件中的內容(實際上並沒有解包和解壓縮該文件),用: unzip -l trfvtbash.zip 命令。(T002)
❽ 【超詳細】可用性測試方法總結
之前總結過一版 交互設計流程圖 ,主要是想給自己以後做設計梳理一下過程,但是那份流程裡面只有枝幹,並沒有枝葉,所以針對每個方法我都會撰寫一份方法總結,或者說指導,目的就是為以後實踐做准備。我期望的效果是,假如一個沒有接觸過該方法的人看到這份總結,可以按照這個總結一步步完成實驗。這就是我最大的目的。下面就是第一份總結《可用性測試方法總結》。
(預警:長文慎入!不過耐心看完肯定會有所收獲)
============分割線==================
可用性測試的過程主要有七個步驟:測試前思考、製作測試原型、撰寫測試腳本、招募測試者、設置測試環境、預測師、正式測試以及測試結果統計分析。這七個步驟有些事可以並行的,有些是需要嚴格按照前後順序執行的。七個步驟組成的流程圖如下:
下面我就針對這七個步驟,談談具體要怎麼做。
不論是做哪個平台的可用性測試,比如PC端、移動端或者是WEB端的可用性測試,最最重要的就是要先理清楚一些基本問題。基本問題就是最經典的5W問題:
·為什麼要進行這個測試(why)?測試可以驗證一些設計中的疑惑,或者找出現有的界面、流程設計上的問題,具體問題要具體分析。
·什麼時候在哪裡做測試(when?where?)?時間一般是需要和測試者協調的;地點一般選擇在安靜的會議室即可,如果公司有專門的實驗室那就最好不過了。
·誰要作為測試者(who)?這里可以在招募測試者會詳細討論,不過測試者一般是跟我們的persona接近的人,或者換個說法,測試者一般是我們的目標用戶。
·我們要測試什麼(what)?測試一些功能點,測試界面設計,測試流程設計,測試設計中有爭議、有疑問的地方。
當然這些問題其實都不太難,但是這些都是至關重要的問題。如果沒有經過這個步驟的思考,整個可用性測試做下來就會像無頭蒼蠅,沒有一個總的指導。
在想清楚以上的問題之後,需要為可用性測試做一些准備工作。主要工作有:①招募測試者; ②撰寫測試腳本; ③製作測試原型。
這三個過程不分先後,條件允許的情況下(人力物力充足時)也可以同時進行。
招募測試者算是可用性測試最重要的一個環節之一的,測試者是否合適直接關繫到測試結果的好壞,測試結果直接關繫到能否發現產品現有的問題。所以招募測試者是重中之重。理想的測試者是我們的目標用戶,所以可用性測試要努力尋找到目標用戶作為測試人員。尋找的途徑如下:
a)最簡便的,假如同事(非同部門)或者好友也是目標用戶,可以選用同事或者好友作為測試人員。
b)其次,大型公司都會有自己的用戶資料庫,可以從這個庫裡面尋找到測試人員。
c)又或者說,委託第三方機構幫忙尋找測試人員也是允許的,不過效果可能不如自己尋找的。
d)當然,現在的應用一般都會有自己的微博、微信、官網或者論壇,這些是非常好的尋找測試者的渠道。我們可以推送招募測試者的公告,讓用戶填寫一份調查之後,我們再篩選得到我們想要的測死者。公告中要註明獎勵,一般為小禮品的獎勵,保證對測試者有一定的吸引力,同時又不至於讓他們會為了這個禮物對個人信息造假。其次,對於測試者,我們需要進行一個篩選【3】。首先需要用戶填寫必要的個人信息:比如姓名、電話(郵箱)、空閑時間;然後根據調查選擇其他一些個人信息:性別、年齡、職業之後,最後留幾道問卷題目進行篩選。
篩選的維度主要有:
·平台。如果測試的產品與平台有關,比如是Android或者iOS,需要在這里進行一個篩選。
·對產品的熟悉程度。比如我們想找一些初級用戶和一些高級用戶,可以選用「使用時間」這一項來衡量用戶對產品的熟悉程度。
測試腳本的好壞直接關繫到結果的好壞。在撰寫測試腳本之前,我們需要先確定一些結果分析的維度。一般的維度有:a)任務完成度b)致命錯誤c)非致命錯誤d)完成任務的時間e)主觀情緒f)偏好和建議。對於這些維度的解釋具看第文章的最後一部分「測試結果統計分析」。
由於分析的維度會關繫到腳本的問題,所以在確定分析維度之後,我們可以對功能點進行任務分析。把所有需要測試的功能點列出來,對每個功能點進行任務設計。對於任務而言,用戶最主觀的感受就是兩個:界面和流程。所以測試腳本又可以從這兩個維度去細分。
需要注意的是,可用性測試中,問只是其中的一部分,觀察是另外一個重要的內容,所以測試腳本不僅僅要有問的問題,還有需要撰寫工作人員觀察的注意點。同時可以在撰寫完測試腳本的同時,把總結大綱也寫出來,方便後期總結的時候統一結果展示。
特別的,在設計的時候有疑惑的點,或者有爭議的點,在可用性測試也可以得到較好的驗證。
寫完測試腳本之後,可以和利益相關者(項目經理、產品經理、開發等)討論一下,請他們校驗一下測試腳本。
界面:
a)當前界面有什麼?
b)每個東西用戶覺得是什麼?
c)可以操作嗎?
d)用什麼手勢操作方式?
e)操作之後會怎麼樣?
f)界面顯示的內容足夠嗎,有沒有缺少什麼東西?
流程: 流程的測試就是根據任務來進行的。把產品的需求文檔羅列出來,然後給每個需求配上一個合適的場景,當然也會出現一個場景覆蓋多個需求的情況,這也是允許的。然後讓用戶在場景下去進行任務,觀察用戶,然後隨時提問用戶,隨時准備回答用戶的問題。
以上兩點適合所有的可用性測試,但是對於版本更新類的可用性測試,我們還需要了解這個更新對於用戶來說的接受度如何,所以需要增加一些對比性的問題:比如說:新舊版的操作流暢度、界面表達對比感受。
最後需要注意的是,一次可用性測試能涵蓋的范圍有限,所以要限制腳本問題的數量,以及對腳本的問題進行優先順序的排序。
舉個例子,之前做過一個微信端的眾籌平台。我就可以設定以下任務:
可用性測試的原型一般是高保真的Demo,可以用Prott,Flinto,proto,墨刀等來製作,製作力求真實還原應用的最終實現效果。製作高保真Demo是一件耗時耗力的工作,所以在製作的時候可以適當忽略一些動效、界面等。不過做出來的Demo最終也可以給開發參考,所以辛苦也是值得的。甚至於,可以請求開發人員製作原生的程序Demo(針對安卓平台),程序Demo體驗會更加好。
當然,紙面模型也是另外一種非常好的工具。紙面模型需要把紙面模型都只做出來,然後把所有的彈出窗口、下拉菜單等控制項也製作出來。然後設計師充當wizard of oz來輔助用戶完成任務。即用戶對著紙面模型來操作,然後設計師實時反饋用戶的操作。這樣子要求設計師非常熟悉測試的應用,同時,測試的時間也會大大增長。同時,動效作為設計的一環在這里無法表現出來,所以結果可能會不如高保真Demo來的好。總之各有利弊,根據實際情況來考慮。
測試環境是指測試的時候需要使用的記錄設備,通過把測試過程記錄下來可以更好地分析用戶的行為,特別是用戶自己都沒有覺察出來的一些東西。
首先,最最重要的一點是錄音,錄音一方面是在整理訪談記錄的時候可以幫助設計師回憶訪問的場景,然後填補一些缺失的筆記。另一方面,錄音也可以作為一種存檔的材料。同時,錄音也存在簡單、易操作、隱蔽等特點,使用錄音筆或者現在隨處可見的智能機即可完成錄音。所以強烈推薦進行可用性測試的時候一定至少要錄音。
錄音之外就是錄像,如果有錄像的話,錄音的步驟就可以省略。錄像主要是記錄用戶的表情和動作。有時候,用戶的表情和動作可以傳達很多東西,通過把這些信息記錄下來可以,設計師偶爾可以挖掘到一些閃光的設計點。
除此之外,用戶的屏幕記錄也是一種方式,通過用戶的屏幕、加上用戶操作的動作,表情,可以真實還原用戶的使用場景,方便後期的分析。
錄像和錄屏的操作比較難進行,主要的設備可以參考如下【5】,具體可以查看相關的鏈接:
·攝像機:記錄動作和部分表情
·眼動儀:可以追蹤眼球的焦點軌跡,不適合移動端
·滑鼠軌跡記錄:記錄滑鼠軌跡,只適用於PC端
·QuickTime (iOS):僅記錄屏幕
·Mobizen (Android):記錄屏幕、手勢
·Display Recorder (iOS):手勢、聲音
·SCR (Android):記錄屏幕、手勢、表情、聲音
·Magitest (iOS):記錄屏幕、手勢、表情、聲音
·Mobizen +AirDroid (Android):現場觀察並記錄手勢、表情、聲音
預測試是正式實施可用性測試前的一次模擬, 模擬有助於發現問題,這時候邀請同事即可。把正式測試的流程走一遍,包括設配的調試、訪談切入、問題的提問、記錄者的記錄等,然後把記錄的錄音、視頻等放出來看看效果如何,效果不如意的時候再進行調整。
總之,預測試可以幫助發現問題,包括以下幾個方面的問題:
·設備的問題。舉個例子,錄音設備放置的位置會影響錄音的效果。
·測試腳本的問題。測試問題是否足夠清晰。
·訪談的切入以及問題的提問。
·記錄者的記錄。
發現問題之後去解決問題,才能使正式測試的時候達到更好的效果。
測試前的接待工作是測試人員對公司的第一印象,給測試人員留下一個好印象、一個好心情有利於可用性測試的進行。所以在這里將一些注意點說一下。
首先,可以事先確認一下用戶的行程。遇到刮風、下雨、下雪等惡劣天氣的時候可以事先送上問候簡訊。
其次,遇上用戶遲到的情況下,也要保持克制。在遲到五分鍾到十分鍾之後再給用戶電話詢問情況,如果用戶因故取消測試,也要保持友好的態度。
在接到用戶之後,送上一杯溫水或者溫熱的飲料,然後讓用戶等待一下。最後可以有專門的人員先和用戶聊聊天,可以打聽一些事情。
正式開始之前有個暖場介紹。首先主持人做一下自我介紹,然後介紹一下測試的目的和時間,需要向用戶強調測試的對象是系統,希望用戶可以暢所欲言。如果有錄音或者錄像,需要向用戶告知會有此類行為,但是結果完全保密。最後還需要簽署保密協議。
正式提問分兩個部分:個人信息的小問題和可用性測試任務問題。
小問題主要是為了讓用戶有個適應的過程,可以迅速進入狀態。一般可以詢問產品使用習慣、產品偏好、上網情況等,之後的測試問題就是主要的可用性測試的問題。這里需要把問題放入到場景中,讓用戶在場景中去完成任務。或者可以詢問用戶的使用習慣,然後引導到腳本中的問題。需要注意的是,不一定要按照腳本的順序提問,可以隨機應變,所以主持人要非常熟悉腳本的內容。除了詢問,聆聽之外,主持人還要觀察用戶的神情以及動作,遇上用戶有疑問的表情的時候可以適當穿插新的問題,但是盡量不要提供幫助,也不要指出用戶的錯誤或指責動作太慢,但是可以詢問用戶「為什麼這么操作」,必要的時候可以選擇停止任務。
測試過程中還需要有一個記錄人員,記錄人員需要記錄:用戶做了什麼動作和步驟(重點)、用戶說了什麼、寫下自己的疑問(適當時候可以進行提問或者讓主持人提問)。
測試結束之後,主持人可以問一下用戶的想法,同時讓記錄人員補充提問,所有問題結束之後,需要對用戶表示感謝。送上禮品並接受用戶的一些交通費報銷票據等。最後要把用戶送到公司門口。
測試結束之後,如果有時間可以立馬進行整理,因為時間越短,整理出來的內容就越豐富。必要的時候,可以用錄音或者錄像來輔助。在撰寫測試腳本的時候還有一份總結大綱,根據大綱來整理內容。大綱要具備靈活性,可以記錄一下測試現場發現的新問題。
記得只是整理而已,每個測試結束都會有一份整理的資料。最後需要匯總多份可用性測試總結,最終出具一份可用性測試結果,根據這份結果進行相應的改進工作。
我們可以從如下幾個維度去分析我們的可用性測試【8】(維度之間可能有交叉):
a)任務完成度。每個測試任務都對應一個目標,只有當用戶達到目標之後,我們才認為他們完成了任務。對於每個任務,用戶完成的情況如何?有多少用戶最終沒能完成任務?多少用戶需要在主持人提示下完成任務?多少人可以自行完成任務?這些都是很重要的指標
b)致命錯誤。嚴重錯誤指那些阻礙用戶完成任務的錯誤,這些錯誤非常重要,每一個都要得到足夠的重視。
c)非致命錯誤。非致命錯誤是指用戶能完成任務,但是某些地方會有一些阻滯,會停頓或者思考的錯誤。這些錯誤相對來說沒那麼重要,不過如果發生的次數較多,該類錯誤也需要得到重視。
d)完成任務的時間。每個任務需要完成多少時間,決定了交互設計流程和界面的設計是否足夠友好。
e)主觀情緒。用戶對於任務的主觀感受,比如是否足夠簡單,是否容易找到信息,可以讓用戶衡量一下。
f)偏好和建議。可以讓用戶說出產品中哪些地方很喜歡?哪些地方不喜歡?或者讓他們提一下建議。
【1】Adaptingyour usability testing practise for mobile http://www.userfocus.co.uk/articles/testing-for-mobile.html
【2】移動可用性測試(一):概述 – 騰訊ISUX–社交用戶體驗設計 http://isux.tencent.com/mobile-usability-testing-one.html
【3】網易公司用戶訪談活動招募問卷 http://survey.askform.cn/51194-79597.aspx
【4】用戶訪談心得總結– 騰訊CDC http://cdc.tencent.com/?p=5690
【5】移動可用性測試(三):現場測試– 騰訊ISUX– 社交用戶體驗設計 http://isux.tencent.com/mobile-usability-testing-three.html
【6】用戶研究經驗談-采銅學心錄-博客大巴 http://xuexinlu.blogbus.com/c4061443/
【7】簡單快速的可用性測試|網易用戶體驗設計中心 http://uedc.163.com/4151.html
【8】Planninga Usability Test Usability.gov http://www.usability.gov/how-to-and-tools/methods/planning-usability-testing.html
❾ 可用性測試腳本應包含哪些內容
可用性測試腳本應包含:
(1)連接速度測試。用戶連接到電子商務網的速度與上網方式有關,他們或許是電話撥號,或是寬頻上網。
(2)負載測試。負載測試是在某一負載級別下,檢測電子商務系統的實際性能。也就是能允許多少個用戶同時在線!可以通過相應的軟體在一台客戶機上模擬多個用戶來測試負載。
(3)壓力測試。壓力測試是測試系統的限制和故障恢復能力,也就是測試電子商務系統會不會崩潰。

概述
更改目標軟體時,需要對測試過程進行局部的可控制的變更。這將使得測試過程和測試腳本對目標軟體的變化有更大的應變能力。例如,假設軟體的登錄部分已經改變。在遍歷該登錄部分的所有測試用例中,只有關於登錄的測試過程和測試腳本需要進行改變。
測試腳本是針對一個測試過程的。一個測試過程往往需要眾多的數據來測試。通過自動錄製得到的腳本,所有的輸入數據都是常數,是固定的。
