第一篇:報表測試方法總結
報表測試方法總結
1.提高對業務的熟悉程度
和功能測試以及其他測試一樣,報表測試也需要熟悉業務,包括業務流程、業務規則以及數據存儲,不同點是報表測試要理解每個指標的算法、數據來源以及要明白具體的業務動作和指標之間的關系,例如:要統計保費收入,首先要考慮正常保單,其次要考慮批增、批減以及注銷、全單退以及其他特殊批改,這些業務類型都可以對此指標的統計結果產生影響。所以如果不能分析業務動作和指標之間的關系,那就無法驗證報表中數據的準確性。
2.數據準備
數據對報表測試來說是非常重要的問題,因為報表的基本功能就是通過各種查詢統計分析的方法為用戶提供準確的數據,幫助用戶進行決策以及分析,所以在報表測試前要保證準備足夠多準確、有效的數據。在實際測試的時候一定要覆蓋到報表所要求的每個維度,要保證所有的指標都要有對應的數據,不能出現指標為零的情況,當然也不需要過多,只要覆蓋了所有的類型就可以了。一下總結了兩種數據準備的方法:
1> 對測試后期比如凍結測試時產生的數據進行備份,用于報表測試,前提一定要保證數據的原始性,不允許對任何人對數據進行修改;
2> 自己手工對數據進行準備并且精心設計,要分析影響所測指標的各種因素,以及每個因素可能出現的不同變化,這樣才有可能覆蓋各種查詢統計方法,并且要考慮需要考慮的是對各種正常的、異常的業務流程和業務規則的組合的遍歷或覆蓋,從而來驗證報表是否取到的該取的數據、沒有取不該取的數據,并且最后計算出了正確的結果。最后要將自己準備的數據用excel保存,并對數據的特點進行記錄,以提高測試時的效率,并可以減少回歸測試工作量;
3.數據正確性驗證
對于客戶來說,使用報表就是期望通過報表系統這個平臺能夠快速簡單的查到自己所需要的數據,所以測試報表最主要的內容就是要驗證數據的正確性,總結方法如下:1 > 要弄清楚數據的來源,來源于哪張表、哪個字段;> 時間條件:統計區間具體應該以業務中的什么時間在卡,并且考慮需求中是否包括統計區間的邊界值;
3> 要弄清楚所測表以及所測指標的特定條件,比如要統計2009-01-01——2009-01-31 這個月份所有代理業務,那特定條件就是將保單的業務來源要限制在代理業務中; 4> Sql準備,這個過程是將上面三個過程進行總結,也是后續和開發人員進行分析數據的基礎,所以提高自己編寫sql的能力。另外當測試時間不充裕的情況下,對一
5>
6>
7>
8> 些簡單的報表,如清單之類的報表就可以不用自己遍寫sql語句,直接選出各種業務類型的單子進行單獨分析; 數據核對以及分析,用sql查詢出的數據要和開發人員的進行核對,由于有些數據量很大,所以最好借助對比工具(推薦:BCompare此軟件),對于核對不上的數據要單獨進行分析,分析的過程往往是發現問題主要環節,在這個過程中,如果自己實在分析不出來,則可以讓開發人員協助; 數據的顯示格式:小數位、千分符,百分號等是否與報表設置的一致,單位、匯率等是否進行轉化,將有些代碼是否轉換成文字,比如被保險人性別,是否將系統中的0、1轉化成男或女; 明細與合計的一致性:各部分明細值的和是否和總和一致等; 要覆蓋所有的查詢統計方式,在時間充分的條件下,要根據條件(篩選項、維度)
通過等價類劃分和排列組合設置各種條件組合,每種都要測試到,千萬不能按照自己的習慣為準;
4.報表格式的顯示
在數據驗證之后,要關注的就是輸出報表的顯示格式是否符合客戶需求。報表的格式主要有兩大類:
一、保險行業標準中規定的報表使用固定格式,如:保監會上報的一些報表,二:按照企業或者用戶的需求定制的報表,所以對這兩大類報表則需要從以下幾個方面去測試:
1> 報表的整體顯示格式是否符合客戶提供的表樣
2> 報表的標題或者表名是否正確
3> 報表頁面的時間段是否是用戶選擇的時間段
4> 當輸出的內容過多時,分頁方式是否正確,翻頁時,是否有與上頁相同的樣式(如
表頭),第2頁的輸出是否正確
5> 需要特別提醒的數據(一些異常數據)是否突出顯示,有些指標計算方法特別復雜
或者有幾個指標容易混淆時是否在頁面有加注釋
5.報表之間的可比性
在縱向的測試完成后,我們要將所測試的報表進行橫向聯系,因為有些報表雖然名稱不一樣,但是有些指標是一樣的,這樣我們就需要將這兩張報表哪起來進行比較,看在相同的時間段內是否統計出的結果都是一樣的。另外不同報表的不同指標之間也是有聯系的,如:業務中的應收保費清單和財務中的應收保費科目余額,當兩者統計口徑一致的時候,清單中的應收保費的合計則等于財務應收科目的余額,還有保費收入、實收保費、應收保費在同一統計區間總保費收入 = 實收保費 + 應收保費(未實收到的),所以在測試過程中,一定要理清它們之間的層次、順序,這就需要加強對業務的理解和知識的積累!
6.其他
1> 報表的輸出以及打印
報表在系統中生成后,并沒有結束.報表一般都需要打印出來供客戶使用用,例如開會或者提交審批之類.所以報表的打印功能也是非常重要的.在打印之前,用戶一般都需要導出報表做進一步的分析或用于和其他報表的比較.所以也要驗證報表的導出功能.一般可以導出的主要格式是Excel,pdf格式,然后要驗證導出的內容是否正確,與生成的報表相一致.2> 報表的性能
盡量要求開發人員采用最優的查詢語句,避免客戶在使用過程中等待時間過長 3> 報表的權限
對于有權限控制的系統,報表當然也應該和用戶所具有的權限相一致.需要從兩方面校驗權限的控制.報表的條件定義:在條件選擇區域,有些下拉框中應該不能顯示用戶權限范圍外的數據.備注:目前這部分內容測試比較少,之前客戶沒有提出權限這方面的需求,但是最近在使用過程中,客戶提出過,要求分公司人員只能查出自己分公司的清單,允許總公司查出所有的符合要求的清單,估計在后續還會提出類似這樣的要求,所以這部分后續要需要加強測試。
第二篇:軟件測試中報表測試用例設計方法總結
軟件測試中報表測試用例設計方法總結
報表的測試主要分為以下幾個方面:界面,安全性,準確性,展示速度(性能)
數據統計方面
1、報表統計數據的正確性;
2、報表統計數據的完整性;
3、報表統計數據的合法性;比如,統計金額字段需求要求有“$”等;
報表格式
1、表頭字段表示的正確性;
2、表頭字段表示的完整性;
3、表頭字段表示的字體,字號,美觀程度;
4、各統計字段的顯示是否滿足需求;比如:數據過長時要求折行還是縮小;
5、頁眉和頁角的表示;
報表的預覽和印刷
1、預覽中的顯示完整性;
2、多頁情況下,第2頁的表頭顯示;
3、能否實現需求要求的特定印刷情況;(比如,印刷使用指定的模板)
4、預覽后印刷;
5、不預覽,直接印刷
6、需求規定各類打印機的測試;
數據準確性測試,帶有報表測試的系統分為兩類,一類是業務系統中,帶有統計分析功能模塊,該模塊中包含分析報表,這個系統的主體是業務系統,報表是為辦理業務的而提供幫助的。
比如說,應年檢統計報表,某月應交罰款車輛統計報表,這樣的報表數據準確與否,可通過增加、刪減、修改相關業務或相關業務的參數,查看統計報表數據變化,檢查數據準確性。
另一類是系統只有統計功能,就是我說的數據倉庫展現這類,它與業務系統分離,并且經過多層處理,比如數據倉庫的數據,經過抽取,清洗,展現前會經過數據挖掘,數據再處理,有些字段在原始數據表中根本就沒有。這樣的數據準確性測試比較復雜,當然檢查出數據錯誤,修改定位也是很不容易的。
從整個項目節約成本看,逐層測試效果是最好的。完全修改率也是最高的。
首先建立測試數據模型,模擬所有應用表,建立簡單易跟蹤的數據用例,底層的數據表測試,方法很原始,嘿嘿,通過SQL語句和手工計算,對數據進行比對。對系統中的報表數據準確性測試方法較為靈活,①系統中報表重疊的進行比對
②對子報表匯總與父報表比對,就是對月報表匯總與年報表比對,日報表匯總與月報表比對,這只是一個方面,可以從維度關系考慮,地域,行政級別、時間,個人等方面下手,進行匯總比對
③這個方法如果延伸點呢,可以將報表間的業務邏輯關系作為比對依據。呵呵,這要看測試人員的需求了解深度個人能力了。插幾句不想干的話,做測試工作總讓我保持快樂狀態,前兩天我的一個同事說,公司里一直沒有人喜歡做測試工作,這個工作太枯燥。嘿嘿,我當時就說我做了這么多年的測試工作從來沒有感覺到枯燥。重復性工作不代表枯燥,編程其實不也是重復嘛,人每天誰不重復昨天的事啊,吃飯,吃這個動作重復一生,有誰覺得麻煩枯燥啦?
④使用SQL和手工計算進行比對。以上是差錯方式,接下來講一下查什么錯?哪些地方容易出錯
●原始表使用錯誤:因為表比較多,又加上沒有統一的數據關系對應表,很容易表使用錯誤,當然這應該是單元測試檢查出來的錯誤。
●數據處理邏輯錯誤:這一點容易因為測試人員和開發人員對需求理解有偏差造成爭執,所以在需求評審時,對數據處理規則用表達式或偽代碼表示清楚。還有就是程序員失誤,邏輯編寫有偏差,邊界值、特殊情況處理不當。
●數據權限:不同用戶對數據有著不同的查看權限。這關系到數據的安全性。
●數據誤差:數據的保留位數,數據是否是處理計算是否是最后一次計算使用了位數保留和四舍五入。
●由于字典表,數據錯誤,而造成的數據錯誤,如,根據性別統計,購買量,表中的男女顛倒,或者沒有考慮性別缺失項,用了ifelse,這樣就是把表中缺失該項內容的算成了else條件里?;蛘哌壿嬛袘摽紤]用戶狀態,數據狀態類似的字段,容易被忽略,測試應該考慮到。
●最后一項,當數據量相當大的時候,統計應該考慮,切割速度,也就是數據的完整性,由于數據切割的滯后,帶來的數據不完整,而造成統計結果不完整。如統計昨天的銷售情況,而昨天的數據并沒有完全從業務系統數據到數據池,再者月底數據,由于最后一天的數據切割不完整而造成的正月統計數量不準確。
報表的界面和輸入輸出測試
界面分為輸入界面和輸出界面;統一的界面要求:美觀、統一、易操作。
輸入界面要求是:
①輸入項字段長度不允許超過字段長度;
②輸入不符合字段要求的,不允許查詢。如money類型,在輸入漢字,字母、特殊字符等不允許查詢,并有友好的操作提示。
③用戶權限范圍外的輸入,不允許查詢。如用戶輸入不是其權限范圍內的客戶號,不允許查詢,并有友好的操作提示。
對于選項,應不出現可選擇的用戶權限以外的選項。
對于漢字模糊查詢,考慮不常見字,如“?”即漢字因譯碼問題,造成的漢字存儲出現亂碼問題。
輸出界面要求:
①因為是報表所以應該有打印、打印預覽、報表導出等功能。不能因為報表導出丟失數據,不能因為打印缺少了報表表格框
②報表排列方式可調,用戶可按任意列升序或降序排列,或者,按某一關鍵列的一定規則排序
③報表標題明確,不能含糊誤導用戶
④報表內可關聯查詢的項,應能特殊顯示,如鼠標有箭頭變為手掌,子報表格式與父報表格式統一,數據統一。
報表測試根據項目的定義有大有小,有時只是作為軟件的一個部分進行測試,有時整個項目都是測試各種報表.但不論如何,報表的作用始終都是將系統中已經存在的數據根據用戶的設置計算加工/整理匯總/最終以清晰的格式展示給用戶,以便用戶進一步做數據分析或統計.軟件中的報表實現一般分為定義報表的所需數據(一般可以通過選擇或手工輸入條件來縮小數據范圍)和定義報表格式兩個部分.報表格式除了如國家各行業標準中規定的報表使用固定格式外,大多是根據企業或用戶的需要定制報表.所以,做報表測試時要注意以下方面:
1.數據的正確
用戶使用報表就是期望通過一個簡單方便的平臺能快速的查找到他所需要的數據.所以在測試報表時首先就要檢查報表中的數據是不是用戶需要的數據,如果沒有加工的數據,是否保持了原貌;加工過的數據查看加工的結構是否和手工加工的結果一致.簡言之,需要測試以下內容.數據的來源:來源于哪張表,哪個字段,數據庫中的數值與界面數據的對應.如數據庫中性別的數據可能是0或1,但界面顯示為男或女,這個對應關系是否正確.數據的范圍:是否只顯示了報表設置的對應范圍;特別要注意邊界數據,要清楚報表的需求,是否需要過濾掉被選擇的數據.如時間選擇為200627~200727,那么是否應該包含9-27這天.數據的對應關系:數據庫中的字段是否與報表中的信息對應
數據的格式:小數位,千位符,四舍五入等是否與報表設置一致;單位或稅率轉換是否正確;組合顯示的數據是否合理
數據的排序:排序方式是否與報表設置一致(如果沒有設置,是否有一個清晰的默認排序方式,如按字母或數字排序)
流水號:如報表有使用流水號,流水號的生成和格式是否正確.取消操作是否會生成流水號.明細與合計的一致性:各部分明細或小節是否與最后總和一致
其他
測試這一部分內容需要對業務邏輯相當熟悉,對數據庫的設計也要非常了解.必要時可以通過自己寫查詢語句查看數據.有些報表的條件有多有少,但測試方法都是一樣.根據條件通過等價類劃分和排列組合設置各種條件組合.千萬不要盲目的測試,否則會導致該測的沒測,多余的測試做了一堆..一般來說有類別劃分的(一般界面表現為下拉框),每個類別都要測試到,如性別中的男,女都要測試.輸入的可以用等價類來劃分要測試的數據.2.格式的正確
數據驗證正確后,就需要看看報表的輸出格式是否符合要求.可以從以下幾方面來檢查.報表的整體風格:報表是否符合規定的或用戶設置的格式
報表標題:報表的標題是否是正確的報表名稱;如報表中有嵌入的數據(會跟隨用戶的選擇而變化的).需要檢查數據是否正確,如XX企業9月份財務報表,這個9月就是用戶選擇的;或者XX公司200627~200727的網站訪問量,這個時間段也是用戶選擇的.公司的一些標志:如logo,名稱,地址之類的是否正確
報表的頁首與頁尾:是否采用了一致的規則.分頁:當輸出的內容多時,分頁是否正確.翻頁功能是否正確
友好性:數據或圖表是否清晰,一目了然,數據的展示符合用戶的習慣;需要特別提醒的數據(如合計,異常數據)是否突出顯示;復雜算法處,用戶不明白或容易混淆處是否有注釋;一些默認的格式是否讓人感覺舒服,如對齊,邊界,間隔等
3.權限的控制
對于有權限控制的系統,報表當然也應該和用戶所具有的權限相一致。需要從兩方面校驗權限的控制。
報表的條件定義:在條件選擇區域,有些下拉框中應該不能顯示用戶權限范圍外的數據。如普通文員在使用報表時,報表名稱下拉框中是不可以顯示管理者才能查看的報表的。有些以輸入的文本框有級別的劃分時,都應該要測試輸入超越權限的數據的相應。
注意這里一定要測試每個條目。
報表內容:報表中的內容不能顯示用戶本沒有權限查看的數據。
4.報表的輸出
報表在電腦上生成后,并不是報表的結束。報表一般都需要打印出來他用,如開會或者提交審批之類。所以報表的打印功能也是非常重要的。測試主要分成三部分:
●打印設置
●打印預覽
●實際打印效果
除了打印之外,用戶有可能需要導出報表做進一步的分析或用于和其他報表的比較。所以也應該提供導出報表的功能。一般可以導出為CSV,Excel,pdf,html,xml格式。
第三篇:軟件測試方法總結
軟件測試方法總結
(一)發布時間: 2008-12-12 17:07作者: lxm_lxm來源: 51Testing論壇
軟件測試方法的總結,是lxm_lxm根據個人所做過的項目整理的,提供給新來的的朋友們。軟件測試方法總結
一、界面
● 界面測試
(1)測試界面設計是否合理、簡潔、美觀,操作是否方便
(2)功能鍵、數據項信息是否齊全
(3)確認系統中同一功能抌名稱是否統一
(4)設計樣式、風格(查詢條件樣式;輸入風格(點選/手輸入);)是否與系統其它模塊統一
(5)確認頁面內所有字段名稱顯示風格是否統一(居中、左對齊、右對齊,一般采用居中顯示風格)
1、新增頁面及功能測試
● 字段
在開始測試時應該保證數據的正確性,然后再從系統中找出各種Bug
(1)各字段輸入正確的信息值保存,確認系統是否可以正確完成新增操作。
(2)進入添加界面不輸入任何信息值,單擊“保存”功能按鈕,系統應該給出某個不允許為空字段的提示信息(屬于邊界測試)
(3)建議不允許為空的字段前面加上?*?作為標記(統一性,方便性問題)
(4)編碼/編號字段不允許輸入中文及特殊字符,否則系統應該給出相應的提示信息
(5)測試編碼/編號字段不允許重復,否則系統應該給出相應的提示信息
(6)確認字段是否已做長度限制,如果輸入值超出長度范圍,那么在保存時系統應該給出提示信息
(7)非法測試,如:校驗數值型字段輸入非數值,保存時系統是否給出相應的提示信息(根據實際需要確定數值型字段是否能夠接受負數)
(8)邊界測試,如:確認數值型字段的邊界值(如:有效值為?0-100?整數,那么輸入-1或101保存時系統應該給出相應的提示信息;輸入值為0、100系統應該能正確保存信息值;輸入0到100內的整數值系統應該正確保存信息值)
(9)精確值測試,測試小數位數是否在定義的長度內
(10)字段精確值是否正確(四舍五入否)。
(11)根據實際情況測試名稱字段是否具有唯一性,(一般情況下名稱是不允許重復的,具體問題具體分析),否則系統應該給出相應的提示信息
(12)確認各字段名稱書寫是否正確(注意:要求編輯界面、住息列表中、錯誤提示信息、查詢條件中的字段名稱完全相同)
(13)確認特殊格式的字段是否已做標準格式的限制(如:電子郵件、郵編等)
(14)測試上級信息字段(如:上級XXX名稱、上級XXX編號)的信息值是否根據所選擇的上級XXX名稱系統自動生成(注意:編號生成值一定是維護界面的編號,而不應該是相應表的那個主鍵編碼)
(15)測試如果某字段信息值是從另一個模塊中選擇輸入的,那么需要確認其它相關聯字段的信息值是否也相應的正確的自動帶入,并且這些字段應該都是只讀的(16)創建人/編輯人、發布人、創建時間、創建人字段應該設為只讀的,而且此類字段值應該默認當前操作人的姓名
(17)如果某個字段可以點選輸入多個信息值,那么測試該字段是否接受,并保存了點選輸入的多個信息值
(18)對于多選字段,測試是否具有記憶上次選擇值并已驗重
(19)測試字符型字段是否可以接受空格(統一性問題,建議不要接受空格)
(20)引用其它模塊的字段信息值的字段長度是否與被引用模塊相應字段長度一致
軟件測試方法總結
(二)發布時間: 2008-12-12 17:13作者: lxm_lxm來源: 51Testing論壇
關鍵字:軟件測試方法
6、常用功能鍵的功能測試
(1)保存---所有編輯頁面如果未輸入任何信息值而單擊“保存”,系統應該給出“XXX字段不允許為空”的提示信息
(2)保存---如果某字段輸入值有錯誤或超出長度范圍,那么單擊“保存”按鈕時,系統應該給出相應的提示信息
(3)保存---輸入相關信息單擊“保存”后,建議系統給出“保存成功”提示信息
(4)保存---測試新增/修改信息保存后,信息列表是否自動刷新
(5)下一步---單擊此按鈕,如果有非空字段為空,系統應該給出相應提示信息;如果有字段輸入非法值,單擊此按鈕系統應該給出相應提示信息;正常情況下單擊此功能按鈕,系統進入到下一個編輯/操作界面
(6)上一步---單擊此功能按鈕,系統應該正確返回到上一個編輯/操作界面
(7)瀏覽---測試該功能鍵功能是否已經正確實現,單擊此按鈕系統應該彈出文件選擇頁面,并且可以選擇輸入相關附件
(8)上傳附件---測試上傳功能已經正確實現,確認上傳的附件在界面相應位置是否顯示
(9)下載---測試下載功能已經正確實現(可以將上傳到服務器的附件下載的本地相應位置)
(10)重新上傳---保存操作后上傳功能按鈕名稱應該自動變為“重新上傳”,并且可以重新上傳附件
(11)發布---測試該功能鍵功能已經正確實現,單擊些功能按鈕系統完成發布操作,相應的信息狀態變為“已發布”,發布人、發布時間系統自動生成或已經正確保存(注意:已經發布的信息是不允許再進行修改操作的)(根據系統需求及設計測試,有些系統只有信息修改頁面才有此功能)
(12)取消發布---測試該功能鍵功能是否已經正確實現,單擊此功能按鈕系統完成取消發布功能,相應信息狀態變為“未發布”(根據系統需求及設計測試,有些系統只有信息修改頁面才有此功能)
(13)關閉---單擊此功能按鈕系統將關閉當前頁面,建議當單擊此功能按鈕時系統彈出“確認離開此頁面提示信息”
(14)查詢---單擊查詢功能按鈕,系統按鈕輸入查詢條件進行模糊查詢;查詢條件輸入非法值進行查詢操作,系統應該查詢0記錄
(15)刪除----未勾選待刪除記錄單擊此按鈕系統彈出相應提示信息;正常情況下系統刪除所選記錄
(16)選擇---勾選待選記錄,單擊此按鈕系統完成選擇操作;單擊選擇超鏈接功能按鈕系統完成選擇操作
(17)取消選擇---單擊此功能按鈕,系統完成取消選擇操作(清除所有選擇信息)
軟件測試方法總結
(三)發布時間: 2008-12-12 17:14作者: lxm_lxm來源: 51Testing論壇
關鍵字:軟件測試方法
11、對用戶名、密碼的有效性測試
(1)密碼信息有效性測試:特殊字符、正常字符、空字符(不輸入)、空格
(2)登陸名是否區分大小寫
(3)登陸名是否允許重名
(4)用戶名字和密碼都為最大長度(邊界值分析,取上點)
(5)用戶名字和密碼都為最小長度(邊界值分析,取上點)
(6)用戶名字和密碼都是非最大和最小長度的數據(邊界值分析,取內點)
(7)用戶名長度大于要求1位(邊界值分析,取離點)
(8)用戶名長度小于要求1位(邊界值分析,取離點)
(9)密碼長度大于要求1位(邊界值分析,取離點)
(10)密碼長度小于要求1位(邊界值分析,取離點)
(11)是否記住上次登陸名
(12)密碼信息有效性測試:字母數字混排、數字、符號數字、字母符號、數字符號、空字符(不輸入)、空格、ASCII字符、字符串在有空格、串在有半角空格
(13)口令鎖定:即輸入口令次數的限制
(14)密碼顯示是否以星號或者別的符號顯示
(15)看是否支持tap和enter鍵等
(16)密碼是否可以復制粘貼
密碼修改測試方法
(1)不輸入舊密碼,直接改密碼
(2)輸入錯誤舊密碼
(3)不輸入確認新密碼
(4)不輸入新密碼
(5)新密碼和確認新密碼不一致
(6)新密碼中有空格
(7)新密碼長度有效性測試方法同上
(8)新密碼為非允許字符(如有的密碼要求必須是英文和數字組成,那么要試漢字和符號等)
(9)測試密碼是否區分大小寫,新密碼中英文小寫,確認密碼中英文大寫
(10)新密碼與舊密碼一樣能否修改成功
軟件測試方法總結
(四)發布時間: 2008-12-12 17:17作者: lxm_lxm來源: 51Testing論壇
關鍵字:軟件測試方法
四、權限測試
1、業務權限
按需求測試用戶業務權限分配是否正確,業務權限主要控制功能模塊、功能菜單的展示,沒有相應業務權限的不展示其功能模塊能功能菜單。
2、操作權限
(1)權限組:按組用戶來分配操作權限。(組內所有人員都具有所分配的操作權限)
(2)測試已分配操作權限的功能按鈕是可見的(3)測試已分配操作權限的功能按鈕是否可用;是否可以正確完成相應功能操作
(4)通常不分配調看操作權限是無法進行修改操作
五、算法
1、測試前需要充分了解算法的整個計算過程及結果值的精度
2、算法測試之前需要準備充足,而且是準確無誤的測試實例
3、根據輸入值確認系統計算輸出結果是否與預期結果完全一致
4、如果計算公式中含有引用其它模塊的數據,需要先確認數據提取是否對應的正確
5、先用等價劃分法、邊界值測試方法測試輸入數據是否在需求范圍內
6、嚴格按照測試用例執行測試,確認計算結果是否正確無誤,注意結果的精度。
第四篇:App測試方法總結
一、安全測試 1.軟件權限
1)扣費風險:包括短信、撥打電話、連接網絡等。
2)隱私泄露風險:包括訪問手機信息、訪問聯系人信息等。
3)對App的輸入有效性校驗、認證、授權、數據加密等方面進行檢測 4)限制/允許使用手機功能接入互聯網 5)限制/允許使用手機發送接收信息功能 6)限制或使用本地連接
7)限制/允許使用手機拍照或錄音 8)限制/允許使用手機讀取用戶數據 9)限制/允許使用手機寫入用戶數據
10)限制/允許應用程序來注冊自動啟動應用程序 2.安裝與卸載安全性
1)應用程序應能正確安裝到設備驅動程序上
2)能夠在安裝設備驅動程序上找到應用程序的相應圖標 3)安裝路徑應能指定
4)沒有用戶的允許,應用程序不能預先設定自動啟動 5)卸載是否安全,其安裝進去的文件是否全部卸載 6)卸載用戶使用過程中產生的文件是否有提示 7)其修改的配置信息是否復原 8)卸載是否影響其他軟件的功能 9)卸載應該移除所有的文件 3.數據安全性
1)當將密碼或其它的敏感數據輸入到應用程序時,其不會被存儲在設備中,同時密碼也不會被解碼。2)輸入的密碼將不以明文形式進行顯示。
3)密碼、信用卡明細或其他的敏感數據將不被存儲在它們預輸入的位置上。4)不同的應用程序的個人身份證或密碼長度必須至少在4-8個數字長度之間。
5)當應用程序處理信用卡明細或其它的敏感數據時,不以明文形式將數據寫到其他單獨的文件或者臨時文件中。以防止應用程序異常終止而又沒有刪除它的臨時文件,文件可能遭受入侵者的襲擊,然后讀取這些數據信息。
6)黨建敏感數據輸入到應用程序時,其不會被存儲在設備中。7)應用程序應考慮或者虛擬機器產生的用戶提示信息或安全警告
8)應用程序不能忽略系統或者虛擬機器產生的用戶提示信息或安全警告,更不能在安全警告顯示前,利用顯示誤導信息欺騙用戶,應用程序不應該模擬進行安全警告誤導用戶。
9)在數據刪除之前,應用程序應當通知用戶或者應用程序提供一個“取消”命令的操作。10)應用程序應當能夠處理當不允許應用軟件連接到個人信息管理的情況。
11)當進行讀或寫用戶信息操作時,應用程序將會向用戶發送一個操作錯誤的提示信息。12)在沒有用戶明確許可的前提下不損壞刪除個人信息管理應用程序中的任何內容。13)如果數據庫中重要的數據正要被重寫,應及時告知用戶。14)能合理的處理出現的錯誤。15)意外情況下應提示用戶。4.通訊安全性
1)在運行軟件過程中,如果有來電、SMS、藍牙等通訊或充電時,是否能暫停程序,優先處理通信,并在處理完畢后能正?;謴蛙浖^續其原來的功能。2)當創立連接時,應用程序能夠處理因為網絡連接中斷,進而告訴用戶連接中斷的情況。3)應能處理通訊延時或中斷。
4)應用程序將保持工作到通訊超時,進而給用戶一個錯誤信息指示有鏈接錯誤。5)應能處理網絡異常和及時將異常情況通報用戶。6)應用程序關閉網絡連接不再使用時應及時關閉,斷開。5.人機接口安全測試
1)返回菜單應總保持可用。2)命令有優先權順序。
3)聲音的設置不影響使用程序的功能。4)聲音的設置不影響應用程序的功能
5)應用程序必須能夠處理不可預知的用戶操作,例如錯誤的操作和同時按下多個鍵。
二、安裝、卸載測試
驗證App是否能正確安裝、運行、卸載、以及操作過程和操作前后對系統資源的使用情況 1.安裝
1)軟件安裝后是否能夠正常運行,安裝后的文件夾以及文件是否寫到了指定的目錄里。2)軟件安裝各個選項的組合是否符合概要設計說明。3)軟件安裝向導的UI測試
4)安裝后沒有生成多余的目錄結構和文件。2.卸載
1)測試系統直接卸載程序是否有提示信息。
2)測試卸載后文件是否全部刪除所有的安裝文件夾。3)卸載是否支持取消功能,單擊取消后軟件卸載的情況。4)系統直接卸載UI測試,是否有卸載狀態進度條提示。
三、UI測試
1)測試用戶界面(如菜單、對話框、窗口和其他控件)布局、風格是否滿足要求、文字是否正確、頁面是否美觀、文字、圖片組合是否完美、操作是否友好等。
2)UI測試的目標是確保用戶界面會通過測試對象的功能來為用戶提供相應的訪問或瀏覽功能。確保用戶界面符合公司或行業的標準。包括用戶友好性、人性化、易操作性測試。1.導航測試
1)按鈕、對話框、列表和窗口等;或在不同的連接頁面之間需要導航。2)是否易于導航,導航是否直觀。3)是否需要搜索引擎。4)導航幫助是否準確直觀。
5)導航與頁面結構、菜單、連接頁面的風格是否一致。2.圖形測試
1)橫向比較,各控件操作方式統一。
2)自適應界面設計,內容根據窗口大小自適應。3)頁面標簽風格是否統一。4)頁面是否美觀。
5)頁面的圖片應有其實際意義而要求整體有序美觀。3.內容測試
1)輸入框說明文字的內容與系統功能是否一致。2)文字長度是否加以限制。3)文字內容是否表意不明。4)是否有錯別字。5)信息是否為中文顯示。
四、功能測試
根據軟件說明或用戶需求驗證App的各個功能實現,采用如下方法實現并評估功能測試過程: 1)采用時間、地點、對象、行為和背景五元素或業務分析等方法分析、提煉App的用戶使用場景,對比說明或需求,整理出內在、外在及非功能直接相關的需求,構建測試點,并明確測試標準。2)根據被測功能點的特性列出相應類型的測試用例對其進行覆蓋,如:設計輸入的地方需要考慮等價、邊界、負面、異常、非法、場景回滾、關聯測試等測試類型對其進行覆蓋。
3)在測試實現的各個階段跟蹤測試實現與需求輸入的覆蓋情況,及時修正業務或需求理解錯誤。1.運行
1)App安裝完成后的試運行,可正常打開軟件。2)App打開測試,是否有加載狀態進度提示。3)App頁面間的切換是否流暢,邏輯是否正確。4)注冊
? ? ? ? ? 同表單編輯頁面 用戶名密碼長度 注冊后的提示頁面
前臺注冊頁面和后臺的管理頁面數據是否一致 注冊后,在后臺管理中頁面提示
5)登錄
? ? 使用合法的用戶登錄系統
系統是否允許多次非法的登錄,是否有次數限制 ? ? ? ? ? ? ? 使用已經登錄的賬號登錄系統是否正確處理 用戶名、口令(密碼)錯誤或漏填時能否登陸 刪除或修改后的用戶,原用戶名登陸
不輸入用戶口令和重復點“確定/取消”按鈕,是否允許登錄 登陸后,頁面中登錄信息 頁面中有注銷按鈕 登錄超時的處理
2.應用的前后臺切換
1)App切換到后臺,再回到App,檢查是否停留在上一次操作界面。2)App切換到后臺,再回到App,檢查功能及應用狀態是否正常。
3)App切換到后臺,再回到前臺時,注意程序是否崩潰,功能狀態是否正常,尤其是對于從后臺切換回前臺數據有自動更新的時候。
4)手機鎖屏解鎖后進入App注意是否會崩潰,功能狀態是否正常,尤其是對于從后臺切換回前臺數據有自動更新的時候。
5)當App使用過程中有電話進來中斷后再切換到App,功能狀態是否正常。6)當殺掉App進城后,再開啟App,App能否正常啟動。
7)出現必須處理的提示框后,切換到后臺,再切換回來,檢查提示框是否還存在,有時候會出現應用自動跳過提示框的缺陷。
8)對于有數據交換的頁面,每個頁面都必須要進行前后臺切換、鎖屏的測試,這種頁面最容易出現崩潰。3.免登陸
很多應用提供免登陸功能,當應用開啟時自動以上一次登錄的用戶身份來使用App。1)考慮無網絡情況時能否正常進入免登錄狀態。
2)切換用戶登陸后,要校驗用戶登錄信息以及數據內容是否相應更新,確保原用戶退出。
3)根據Mtop的現有規則,一個賬戶只允許登陸一臺機器。所以,需要檢查一個賬戶登錄多臺手機的情況。原手機里的用戶需要被退出,給出友好提示。4)App切換到后臺,在切換回前臺的校驗。5)切換到后臺,再切換回到前臺的測試。
6)密碼更換后,檢查有數據交換時是否進行了有效身份的校驗。
7)支持自動登錄的應用在進行數據校驗時,檢查系統是否能自動登錄成功并且數據操作無誤。8)檢查用戶主動退出登錄后,下次啟動App,應停留在登錄界面。4.離線瀏覽
很多應用會支持離線瀏覽,即在本地客戶端會緩存一部分數據供用戶查看。1)在無線網絡情況可以瀏覽本地數據。2)退出App再開啟App時能正常瀏覽。3)切換到后臺再回到前臺可以正常瀏覽。4)鎖屏后再解鎖回到應用前臺可以正常瀏覽。
5)在對服務器段的數據有更新時回給予離線的相應提示。5.App更新
1)當客戶端有新版本時,有更新提示。
2)當版本為非強制升級版時,用戶可以取消更新,老版本能正常使用。用戶在下次啟動App時,仍出現更新提示。
3)當版本為強制升級版時,但給出強制更新后用戶沒有做更新時,退出客戶端。下次啟動App時,仍出現強制升級提示。4)當客戶端有新版本時,在本地不刪除客戶端的情況下,直接更新檢查是否能正常更新。
5)當客戶端有新版本時,在本地不刪除客戶端的情況下,檢查更新后的客戶端功能是否是新版本。6)當客戶端有新版本時,在本地不刪除客戶端的情況下,檢查資源同名文件如圖片是否能正常更新成最新版本。如果以上無法更新成功的,也都屬于缺陷。6.定位、照相機服務
1)App有用到相機,定位服務時,需要注意系統版本差異。
2)有用到照相機服務的地方,需要進行前后臺的切換測試,檢查應用是否正常。3)測試照相機服務時,需要采用真機進行測試。7.PUSH測試
1)檢查Push消息是否按照指定的業務規則發送。
2)檢查不接收推送消息時,用戶不會在接收到Push消息。
3)如果用戶設置了免打擾的時間段,檢查在免打擾時間段內,用戶接收不到Push。在非免打擾時間段內,用戶能正常收到Push。
4)當Push消息是針對登錄用戶的時候,需要檢查收到的Push與用戶身份是否相符,沒有錯誤的將其他人的消息推送過來。一般情況下,只對手機上最后一個登錄用戶進行消息推送。5)測試Push時,需要采用真機進行測試。
五、性能測試
1)響應能力測試:測試App中的各類操作是否滿足用戶響應時間要求。
? ? App安裝、卸載的響應時間 App各類功能性操作的響應時間
2)壓力測試,反復/長期操作下,系統資源是否占用異常。
? App反復進行安裝卸載,檢查系統資源是否正常 ? 其他功能反復進行操作,檢查系統資源是否正常
六、交叉事件測試
針對智能終端應用的服務等級劃分方式及實時特性所提出的測試方法。交叉測試又叫事件或沖突測試,是指一個功能正在執行過程中,同時另外一個事件或操作對該過程進行干擾的測試。如:App在前/后臺運行狀態時與來電、文件下載、音樂收聽等關鍵運用的交互情況測試等。交叉事件測試非常重要,能發現很多應用中潛在的性能問題。1)多個App同時運行是否影響正常功能。2)App運行時前/后臺切換是否影響正常功能。3)App運行時撥打/接聽電話。4)App運行時發送/接收信息。5)App運行時發送/收取郵件。6)App運行時瀏覽網絡。
7)App運行時使用藍牙傳送/接收數據。
8)App運行時使用相機、計算器等手機自帶設備。
七、兼容測試
主要測試內部和外部兼容性 1)與本地及主流App是否兼容
2)與各種設備是否兼容,若有跨系統支持則需要檢驗是否在個系統下,各種行為是否一致。
? ? 不同手機屏幕分標率的兼容性 不同手機品牌的兼容性
八、回歸測試
1)Bug修復后且在新版本發布后需要進行回歸測試。2)Bug修復后的回歸測試在交付前、要進行大量用例的回歸測試。
九、用戶體驗測試
以主觀的普通消費者的角度去感知產品或服務的舒適、有用、易用、友好親切程度。通過不同個體、獨立空間和非經驗的統計復用方式去有效評價產品的體驗特性,提出修改意見提升產品的潛在客戶滿意度。
1)是否有空數據界面設計,引導用戶去執行操作。2)是否濫用用戶引導。
3)是否有不可點擊的效果,如:你的按鈕此時處于不可用狀態,那么一定要灰掉,或者拿掉按鈕,否則會給用戶誤導。4)菜單層次是否太深。5)交互流程分支是否太多。6)相關的選項是否離的很遠。7)一次是否載入太多的數據。8)界面中按鈕可點擊范圍是否適中。
9)標簽頁是否跟內容沒有從屬關系,當切換標簽的時候,內容跟著切換。10)操作應該有主次從屬關系。
11)是否定義Back的邏輯。涉及軟硬件交互時,Back鍵應具體定義。12)是否有橫屏模式的設計,應用一般需要支持橫屏模式,即自適應設計。
十、手勢操作測試
1)手機開鎖屏對運行中的App的影響。2)運行中的App前后臺切換的影響。3)多個運行中的App的切換。4)App運行時關機。5)App運行時重啟系統。6)App運行時充電
7)App運行時Kill掉進程再打開
十一、客戶端數據庫測試 1)一般的增、刪、改、查測試。
2)當表不存在時是否能自動創建,當數據庫表被刪除后能否再自建,數據是否還能自動從服務器中獲取回來并保存。
3)在業務需要從服務器端取回數據保存到客戶端的時候,客戶端能否將數據保存到本地。
4)當業務需要從客戶端取數據時,檢查客戶端數據存在時,App數據是否能自動從客戶端數據中取出,還是仍然會從服務器端獲???檢查客戶端數據不存在時,App數據能否自動從服務器端獲取到并保存到服務器端。
5)當業務對數據進行了修改、刪除后,客戶端和服務器端是否會有相應的更新。
第五篇:SIT測試方法總結
SIT測試方法總結
測試人員介入時機
對于SIT測試,測試人員最佳介入時間為需求分析階段,在需求分析階段就介入測試可以使測試人員更高效充分的了解需求,從而提高后面測試用例編寫及測試用例執行的效率。
制定測試方案
測試人員進入項目后首要任務是制定測試方案。制定測試方案的目的: 1.明確測試目的。2.制定本次測試范圍。3.闡述本次測試的策略。
4.羅列測試過程中可能遇到的風險及應對措施。5.安排測試人員的任務。
6.確定測試實施過程中需要準備的數據。
7.確定測試階段的輪次及各項測試工作的時間節點。8.制定缺陷分級的級別描述以及缺陷修復的時效。以上8點作為測試方案的重要內容。測試方案編寫后,與項目組其他人員以及客戶方一起參與測試方案的評審工作;對測試方案評審完成后測試方案正式定稿。
案例對需求的覆蓋
測試案例對需求的覆蓋率直接關系到測試質量,如果覆蓋率不夠則系統中隱藏的缺陷無法被發現,存在嚴重的質量風險。提高案例的覆蓋率有效的方法:
1.提高測試人員對需求的理解,對需求進行逐字逐句的分析將顯性與隱性的功能點充分挖掘出來。
2.測試人員在編寫測試用例之前先編寫測試大綱,羅列出功能點并與需求人員一同對測試大綱進行評審,找出遺漏的測試點。
3.測試大綱評審完成后根據測試大綱所羅列的測試點進行測試案例編寫,編寫完成后與開發人員、需求人員一同對案例進行評審,找出潛在的遺漏部分。
案例編寫策略(易讀易執行優先級等)
1.測試用例編寫遵循以下大體分類:界面及字段顯示,字段取值規則,模塊功能,上下游模塊功能關聯。2.用例應包括以下內容:功能,子功能,優先級,用例類型,測試點,操作步驟,預期結果。
編寫是功能子功能描述清晰,一條用例對應一個測試點和唯一的預期結果。操作步驟編寫是簡單易懂具有很好的可操作性,測試點、預期結果需言簡意賅可讀性強。
3.案例優先級的確定規則一般為:模塊功能=上下游模塊功能關聯>字段取值規則>界面及字段顯示。
制定測試計劃及測試資源分配(工作量輪次)
1.測試用例編寫完成后對測試實施制定測試計劃,計劃按照單個測試人員每日預估執行案例數,測試人員數量,測試用例總量計算出需要的測試實施時間,如測算出的時間超過測試方案中計劃時間時需要與項目負責人溝通延長測試時間或者增加測試資源。(每個人每天的工作量是有限的所以不可以通過總量/時間/人數來倒退每人每日需執行的數量)。
2.測試實施過程需經過三個階段:準入測試階段,第一輪測試階段,第二輪測試階段。
第二輪測試階段在第一輪測試的案例中選取,選擇策略:在一輪測試中該模塊測試情況不良好,缺陷較多則在二輪中著重測試;系統的重要功能需在二輪中著重測試;一輪中缺陷優先級高的再二輪中著重測試。
3.測試用例在執行時有難易之分,為了保證測試人員可以完成計劃中的工作量,在分配時要綜合考慮有所區分。
實施過程中的策略
1.測試用例的難易程度存在兩個維度:用例所屬模塊,用例優先級;當用例的所屬模塊功能操作較易時則可不考慮用例的優先級;當用例的所屬模塊功能操作以及需要準備的數據比較復雜時則需要優先執行用例優先級較高的用例。
2.測試人員被分配需執行的用例后首先要做的是縱覽一遍需要執行的用例,對用例需要的數據進行整合,使用最少的數據來覆蓋所需執行的用例。
3.在測試中遇到阻礙性問題導致后續功能測試進度延遲,此時需組織復雜該模塊開發的骨干人員聯合測試人員在該模塊進入測試階段之前進行調通,以便于測試人員按照測試計劃開始該模塊測試時不會發生嚴重的阻礙性缺陷,可以有效的提高測試效率。
缺陷的處理
1.使用測試工具提交缺陷時需填寫完整功能模塊,問題描述簡單易懂并附上截圖,標明使用的數據編號,使用的用戶。
2.提交缺陷時缺陷級別嚴格按照測試方案中所制定的缺陷等級標準。
3.開發人員將缺陷狀態指為已解決后測試人員在關閉時需復測,同時將復測通過的截圖記錄在測試工具中。
4.對于缺陷修復的時效需要實時關注,特別對于優先級高且影響測試進度的缺陷需要重點跟蹤直到被解決。附件:
1.測試方案與計劃:測試方案與計劃.xlsx
2.測試案例模板:測試案例.xlsx