两个人的电影免费视频_国产精品久久久久久久久成人_97视频在线观看播放_久久这里只有精品777_亚洲熟女少妇二三区_4438x8成人网亚洲av_内谢国产内射夫妻免费视频_人妻精品久久久久中国字幕

一種軟件測(cè)試方法和系統(tǒng)的制作方法

文檔序號(hào):6500880閱讀:191來源:國知局
一種軟件測(cè)試方法和系統(tǒng)的制作方法
【專利摘要】本發(fā)明實(shí)施例公開了一種軟件測(cè)試方法和系統(tǒng)。本發(fā)明技術(shù)方案采用在對(duì)測(cè)試對(duì)象的控件進(jìn)行測(cè)試時(shí),記錄測(cè)試過程,并在發(fā)現(xiàn)測(cè)試對(duì)象存在缺陷時(shí),記錄發(fā)現(xiàn)缺陷的次數(shù),然后根據(jù)發(fā)現(xiàn)缺陷的次數(shù)將測(cè)試用例移入相應(yīng)的進(jìn)階測(cè)試用例庫中,其中,進(jìn)階測(cè)試用例庫的階數(shù)與測(cè)試用例的執(zhí)行概率成正比,從而在一定程度上可以反映出測(cè)試用例的價(jià)值,以便用戶選擇具有高價(jià)值的測(cè)試用例來進(jìn)行測(cè)試,提高測(cè)試時(shí)發(fā)現(xiàn)問題的能力;而且,由于記錄了測(cè)試過程,所以提供了一種可以回歸驗(yàn)證軟件缺陷的能力。
【專利說明】一種軟件測(cè)試方法和系統(tǒng)

【技術(shù)領(lǐng)域】
[0001] 本發(fā)明涉及通信【技術(shù)領(lǐng)域】,具體涉及一種軟件測(cè)試方法和系統(tǒng)。

【背景技術(shù)】
[0002] 隨著互聯(lián)網(wǎng)技術(shù)的飛速發(fā)展,各種軟件的應(yīng)用也日益繁多。每一款軟件或多或少 都會(huì)存在漏洞(bug),為了進(jìn)一步改善和優(yōu)化這些軟件,提高軟件應(yīng)用的穩(wěn)定性,需要將這 些漏洞找出,并予于解決。
[0003] 軟件測(cè)試,正是針對(duì)該問題所提出的一種方案,它可以利用測(cè)試工具按照測(cè)試方 案對(duì)軟件進(jìn)行功能和性能測(cè)試,并對(duì)測(cè)試方案可能出現(xiàn)的問題進(jìn)行分析和評(píng)估?,F(xiàn)有的軟 件測(cè)試方法包括有多種形式,猴子測(cè)試(Monkey Test),即搞怪測(cè)試,就是其中的一種。在猴 子測(cè)試中,測(cè)試者可以進(jìn)行各種稀奇古怪的操作模式,用以測(cè)試軟件的穩(wěn)定度。當(dāng)前應(yīng)用的 猴子測(cè)試基本上以隨機(jī)性測(cè)試為主,而且,一般會(huì)采用較為復(fù)雜的測(cè)試,因?yàn)閺?fù)雜的測(cè)試會(huì) 比簡(jiǎn)單的測(cè)試找到更多的漏洞。
[0004] 在對(duì)現(xiàn)有技術(shù)的研究和實(shí)踐過程中,本發(fā)明的發(fā)明人發(fā)現(xiàn),在現(xiàn)有的猴子測(cè)試方 法中,當(dāng)發(fā)現(xiàn)被測(cè)試的軟件存在缺陷時(shí),無法再次通過相同的方式測(cè)試出該缺陷。此外,當(dāng) 發(fā)現(xiàn)缺陷已經(jīng)被解決時(shí),也無法去驗(yàn)證該缺陷是否真的被解決了。


【發(fā)明內(nèi)容】

[0005] 本發(fā)明實(shí)施例提供一種軟件測(cè)試方法和系統(tǒng),在發(fā)現(xiàn)被測(cè)試的軟件存在缺陷時(shí), 可以通過相同的方式測(cè)試出現(xiàn)該缺陷,并進(jìn)化該相同的測(cè)試方式,而且,在發(fā)現(xiàn)缺陷已經(jīng)被 解決時(shí),可以驗(yàn)證該缺陷是否已經(jīng)被解決。
[0006] 一種軟件測(cè)試方法,包括:
[0007] 獲取測(cè)試對(duì)象中所有控件;
[0008] 從基本測(cè)試用例庫和/或進(jìn)階測(cè)試用例庫中獲取測(cè)試用例(Test Case);
[0009] 利用所述測(cè)試用例對(duì)所述控件進(jìn)行測(cè)試,并記錄測(cè)試過程;
[0010] 若發(fā)現(xiàn)測(cè)試對(duì)象存在缺陷,則記錄發(fā)現(xiàn)缺陷的次數(shù);
[0011] 根據(jù)所述發(fā)現(xiàn)缺陷的次數(shù)將所述測(cè)試用例移入相應(yīng)的進(jìn)階測(cè)試用例庫中,所述進(jìn) 階測(cè)試用例庫的階數(shù)與測(cè)試用例的執(zhí)行概率成正比。
[0012] 一種軟件測(cè)試系統(tǒng),包括:
[0013] 控件獲取單元,用于獲取測(cè)試對(duì)象中所有控件;
[0014] 測(cè)試用例獲取單元,用于從基本測(cè)試用例庫和/或進(jìn)階測(cè)試用例庫中獲取測(cè)試用 例;
[0015] 測(cè)試單元,用于利用所述測(cè)試用例對(duì)所述控件進(jìn)行測(cè)試;
[0016] 記錄單元,用于記錄測(cè)試過程,若發(fā)現(xiàn)測(cè)試對(duì)象存在缺陷,則記錄發(fā)現(xiàn)缺陷的次 數(shù);
[0017] 處理單元,用于根據(jù)所述發(fā)現(xiàn)缺陷的次數(shù)將所述測(cè)試用例移入相應(yīng)的進(jìn)階測(cè)試用 例庫中,所述進(jìn)階測(cè)試用例庫的階數(shù)與測(cè)試用例的執(zhí)行概率成正比。
[0018] 本發(fā)明實(shí)施例采用在對(duì)測(cè)試對(duì)象的控件進(jìn)行測(cè)試時(shí),記錄測(cè)試過程,并在發(fā)現(xiàn)測(cè) 試對(duì)象存在缺陷時(shí),記錄發(fā)現(xiàn)缺陷的次數(shù),然后根據(jù)發(fā)現(xiàn)缺陷的次數(shù)將測(cè)試用例移入相應(yīng) 的進(jìn)階測(cè)試用例庫中,其中,進(jìn)階測(cè)試用例庫的階數(shù)與測(cè)試用例的執(zhí)行概率成正比,從而在 一定程度上可以反映出測(cè)試用例的價(jià)值,以便用戶選擇具有高價(jià)值的測(cè)試用例來進(jìn)行測(cè) 試,提高測(cè)試時(shí)發(fā)現(xiàn)問題的能力;而且,由于記錄了測(cè)試過程,所以提供了一種可以回歸驗(yàn) 證軟件缺陷的能力,即在發(fā)現(xiàn)被測(cè)試的軟件存在缺陷時(shí),可以通過相同的方式測(cè)試出現(xiàn)該 缺陷,并進(jìn)化該相同的測(cè)試方式,此外,在發(fā)現(xiàn)缺陷已經(jīng)被解決時(shí),還可以驗(yàn)證該缺陷是否 已經(jīng)被解決。

【專利附圖】

【附圖說明】
[0019] 為了更清楚地說明本發(fā)明實(shí)施例中的技術(shù)方案,下面將對(duì)實(shí)施例描述中所需要使 用的附圖作簡(jiǎn)單地介紹,顯而易見地,下面描述中的附圖僅僅是本發(fā)明的一些實(shí)施例,對(duì)于 本領(lǐng)域技術(shù)人員來講,在不付出創(chuàng)造性勞動(dòng)的前提下,還可以根據(jù)這些附圖獲得其他的附 圖。
[0020] 圖1是本發(fā)明實(shí)施例提供的軟件測(cè)試方法的流程圖;
[0021] 圖2是本發(fā)明實(shí)施例提供的軟件測(cè)試方法的流程圖;
[0022] 圖3是本發(fā)明實(shí)施例提供的軟件測(cè)試系統(tǒng)的結(jié)構(gòu)示意圖。

【具體實(shí)施方式】
[0023] 下面將結(jié)合本發(fā)明實(shí)施例中的附圖,對(duì)本發(fā)明實(shí)施例中的技術(shù)方案進(jìn)行清楚、完 整地描述,顯然,所描述的實(shí)施例僅僅是本發(fā)明一部分實(shí)施例,而不是全部的實(shí)施例?;?本發(fā)明中的實(shí)施例,本領(lǐng)域技術(shù)人員在沒有作出創(chuàng)造性勞動(dòng)前提下所獲得的所有其他實(shí)施 例,都屬于本發(fā)明保護(hù)的范圍。
[0024] 本發(fā)明實(shí)施例提供一種軟件測(cè)試方法和系統(tǒng)。以下分別進(jìn)行詳細(xì)說明。
[0025] 實(shí)施例一、
[0026] 本實(shí)施例將從軟件測(cè)試系統(tǒng)的角度進(jìn)行描述。
[0027] -種軟件測(cè)試方法,包括:獲取測(cè)試對(duì)象中所有控件,從基本測(cè)試用例庫和/或進(jìn) 階測(cè)試用例庫中獲取測(cè)試用例,利用該測(cè)試用例對(duì)這些控件進(jìn)行測(cè)試,并記錄測(cè)試過程;若 發(fā)現(xiàn)測(cè)試對(duì)象存在缺陷,則記錄發(fā)現(xiàn)缺陷的次數(shù);根據(jù)發(fā)現(xiàn)缺陷的次數(shù)將所述測(cè)試用例移 入相應(yīng)的進(jìn)階測(cè)試用例庫中,其中,進(jìn)階測(cè)試用例庫的階數(shù)與測(cè)試用例的執(zhí)行概率成正比。
[0028] 如圖1所示,具體流程可以如下:
[0029] 101、獲取測(cè)試對(duì)象中所有控件;
[0030] 其中,測(cè)試對(duì)象具體可以為各種軟件,比如客戶端軟件等;控件可以包括按鈕控 件、靜態(tài)鏈接控件、勾選框控件和/或列表控件等,在此不再列舉。
[0031] 102、從基本測(cè)試用例庫和/或進(jìn)階測(cè)試用例庫中獲取測(cè)試用例(Test Case);
[0032] 其中,測(cè)試用例是為某個(gè)特殊目標(biāo)而編制的一組測(cè)試輸入、執(zhí)行條件以及預(yù)期結(jié) 果,其可以測(cè)試某個(gè)程序路徑或核實(shí)是否滿足某個(gè)特定需求。
[0033] 基本測(cè)試用例庫和進(jìn)階測(cè)試用例庫中的測(cè)試用例是以前進(jìn)行軟件測(cè)試時(shí)自動(dòng)保 存的測(cè)試用例,其中,基本測(cè)試用例庫保存的是最基本的測(cè)試用例,而進(jìn)階測(cè)試用例庫保存 的是發(fā)現(xiàn)了測(cè)試對(duì)象存在缺陷的測(cè)試用例,進(jìn)階測(cè)試用例庫可以包括多個(gè)不同階數(shù)的測(cè)試 用例庫,不同的階數(shù)對(duì)應(yīng)不同的"發(fā)現(xiàn)缺陷的次數(shù)"閾值,階數(shù)越高代表測(cè)試用例可以發(fā)現(xiàn) 測(cè)試對(duì)象的缺陷的次數(shù)越多。這是因?yàn)椋绻麥y(cè)試用例測(cè)試對(duì)象存在缺陷的次數(shù)越多,就代 表該測(cè)試用例越容易發(fā)現(xiàn)被測(cè)試對(duì)象所存在的缺陷,也就是說,該測(cè)試用例的價(jià)值就越高, 其對(duì)應(yīng)被執(zhí)行的次數(shù)應(yīng)該越多(即被執(zhí)行的概率越高),所以,其對(duì)應(yīng)的進(jìn)階測(cè)試用例庫的 階數(shù)(或者稱為層次)越高。
[0034] 此外,在步驟101,即"獲取測(cè)試對(duì)象中所有控件"之后,該軟件測(cè)試方法還可以包 括:
[0035] 建立基本測(cè)試用例庫,例如,具體可以如下:
[0036] 按照預(yù)置步長模擬點(diǎn)擊這些控件,記錄每一個(gè)步長內(nèi)的點(diǎn)擊過程,并作為測(cè)試用 例保存在基本測(cè)試用例庫中。
[0037] 其中,步長指的是每個(gè)周期所能點(diǎn)擊控件的次數(shù),即點(diǎn)擊周期;該步長的大小可以 根據(jù)實(shí)際應(yīng)用的需求進(jìn)行設(shè)置,比如,可以設(shè)置為每個(gè)點(diǎn)擊周期為30次,等等。
[0038] 可選的,為了避免基本測(cè)試用例庫中存在重復(fù)的測(cè)試用例,節(jié)省存儲(chǔ)空間,以及提 高處理效率,在將測(cè)試用例庫保存在基本測(cè)試用例庫之前,還可以對(duì)測(cè)試用例作一個(gè)判斷, 即判斷基本測(cè)試用例庫中是否存在該測(cè)試用例,若存在,則無需將該測(cè)試用例保存在基本 測(cè)試用例庫中,若不存在,才將所述測(cè)試用例保存在基本測(cè)試用例庫中。即:
[0039] 步驟"作為測(cè)試用例保存在基本測(cè)試用例庫中"具體可以為:確定基本測(cè)試用例庫 中不存在該測(cè)試用例時(shí),將該測(cè)試用例保存在基本測(cè)試用例庫中。
[0040] 103、利用測(cè)試用例對(duì)控件進(jìn)行測(cè)試,并記錄測(cè)試過程;
[0041] 例如,具體可以以本地日志的形式來記錄測(cè)試過程,這樣,既方便用戶隨時(shí)進(jìn)行查 看,也方便系統(tǒng)隨時(shí)進(jìn)行調(diào)用。
[0042] 104、若發(fā)現(xiàn)測(cè)試對(duì)象存在缺陷,則記錄發(fā)現(xiàn)缺陷的次數(shù);
[0043] 其中,測(cè)試對(duì)象存在缺陷,指的是能被該軟件測(cè)試系統(tǒng)明顯感知為漏洞(bug)的缺 陷,比如程序崩潰等。
[0044] 105、根據(jù)發(fā)現(xiàn)缺陷的次數(shù)將該測(cè)試用例移入相應(yīng)的進(jìn)階測(cè)試用例庫中,其中,進(jìn) 階測(cè)試用例庫的階數(shù)(或者稱為層數(shù))與測(cè)試用例的執(zhí)行概率成正比,具體可參見步驟102 中的說明,例如,具體可以如下:
[0045] 如果發(fā)現(xiàn)測(cè)試對(duì)象存在缺陷,則可以將該測(cè)試用例從基本測(cè)試用例庫移入進(jìn)階1 測(cè)試用例庫,即,將該測(cè)試用例加入進(jìn)階1測(cè)試用例庫,并將該測(cè)試用例從基本測(cè)試用例庫 刪除;
[0046] 如果發(fā)現(xiàn)測(cè)試對(duì)象存在缺陷的次數(shù)超過第一閾值,比如5次,則可以將該測(cè)試用 例從進(jìn)階1測(cè)試用例庫移入進(jìn)階2測(cè)試用例庫,S卩,將該測(cè)試用例加入進(jìn)階2測(cè)試用例庫, 并將該測(cè)試用例從進(jìn)階1測(cè)試用例庫刪除;
[0047] 如果發(fā)現(xiàn)測(cè)試對(duì)象存在缺陷的次數(shù)超過第二閾值,比如10次,則可以將該測(cè)試用 例從進(jìn)階2測(cè)試用例庫移入進(jìn)階3測(cè)試用例庫,S卩,將該測(cè)試用例加入進(jìn)階3測(cè)試用例庫, 并將該測(cè)試用例從進(jìn)階2測(cè)試用例庫刪除;
[0048] 同理,如果發(fā)現(xiàn)測(cè)試對(duì)象存在缺陷的次數(shù)超過第三閾值,比如15次,則可以將該 測(cè)試用例從進(jìn)階3測(cè)試用例庫移入進(jìn)階4測(cè)試用例庫,S卩,將該測(cè)試用例加入進(jìn)階4測(cè)試用 例庫,并將該測(cè)試用例從進(jìn)階3測(cè)試用例庫刪除,等等,以此類推。
[0049] 其中,進(jìn)階測(cè)試用例庫的階數(shù)可以由測(cè)試策略進(jìn)行定制,而各個(gè)階數(shù)所對(duì)應(yīng)的閾 值,比如第一閾值、第二閾值和第三閾值等,可以根據(jù)實(shí)際應(yīng)用的需求進(jìn)行設(shè)置,在此不再 贅述。
[0050] 由上可知,本實(shí)施例采用在對(duì)測(cè)試對(duì)象的控件進(jìn)行測(cè)試時(shí),記錄測(cè)試過程,并在發(fā) 現(xiàn)測(cè)試對(duì)象存在缺陷時(shí),記錄發(fā)現(xiàn)缺陷的次數(shù),然后根據(jù)發(fā)現(xiàn)缺陷的次數(shù)將測(cè)試用例移入 相應(yīng)的進(jìn)階測(cè)試用例庫中,其中,進(jìn)階測(cè)試用例庫的階數(shù)與測(cè)試用例的執(zhí)行概率成正比,從 而在一定程度上可以反映出測(cè)試用例的價(jià)值,以便用戶選擇具有高價(jià)值的測(cè)試用例來進(jìn)行 測(cè)試,提高測(cè)試時(shí)發(fā)現(xiàn)問題的能力;而且,由于記錄了測(cè)試過程,所以提供了一種可以回歸 驗(yàn)證軟件缺陷的能力,即在發(fā)現(xiàn)被測(cè)試的軟件存在缺陷時(shí),可以通過相同的方式測(cè)試出現(xiàn) 該缺陷,并進(jìn)化該相同的測(cè)試方式,此外,在發(fā)現(xiàn)缺陷已經(jīng)被解決時(shí),還可以驗(yàn)證該缺陷是 否已經(jīng)被解決。
[0051] 實(shí)施例二、
[0052] 根據(jù)實(shí)施例一所描述的方法,以下將舉例作進(jìn)一步詳細(xì)說明。
[0053] 在本實(shí)施例中,將以進(jìn)階測(cè)試用例庫的階數(shù)具體為"3"為例進(jìn)行說明,即進(jìn)階測(cè)試 用例庫包括進(jìn)階1測(cè)試用例庫、進(jìn)階2測(cè)試用例庫和進(jìn)階3測(cè)試用例庫。應(yīng)當(dāng)理解的是,進(jìn) 階測(cè)試用例庫的階數(shù)也可以為其他的數(shù)值,比如4、5、6、....或N,等等,其中,N可以由測(cè)試 策略進(jìn)行定制,如果階數(shù)為其他的數(shù)值,其實(shí)施與此也類似,在此不再贅述。
[0054] 如圖2所示,一種軟件測(cè)試方法,具體流程可以如下:
[0055] 201、軟件測(cè)試系統(tǒng)獲取測(cè)試對(duì)象中所有控件;
[0056] 其中,測(cè)試對(duì)象具體可以為各種軟件,比如客戶端軟件等;控件可以包括按鈕控 件、靜態(tài)鏈接控件、勾選框控件和/或列表控件等,在此不再列舉。
[0057] 202、軟件測(cè)試系統(tǒng)從步驟201獲取到的所有控件中隨機(jī)獲取一些控件,并按照預(yù) 置步長模擬點(diǎn)擊這些控件。
[0058] 其中,步長指的是每個(gè)周期所能點(diǎn)擊控件的次數(shù),即點(diǎn)擊周期;該步長的大小可以 根據(jù)實(shí)際應(yīng)用的需求進(jìn)行設(shè)置,比如,可以設(shè)置為每個(gè)點(diǎn)擊周期為30次,等等。
[0059] 203、軟件測(cè)試系統(tǒng)記錄每一個(gè)步長內(nèi)的點(diǎn)擊過程,并作為測(cè)試用例保存在基本測(cè) 試用例庫中。
[0060] 其中,為了避免基本測(cè)試用例庫中存在重復(fù)的測(cè)試用例,節(jié)省存儲(chǔ)空間,以及提高 處理效率,在將測(cè)試用例庫保存在基本測(cè)試用例庫之前,還可以對(duì)測(cè)試用例作一個(gè)判斷,即 判斷基本測(cè)試用例庫中是否存在該測(cè)試用例,若存在,則無需將該測(cè)試用例保存在基本測(cè) 試用例庫中,若不存在,才將所述測(cè)試用例保存在基本測(cè)試用例庫中。
[0061] 204、若在測(cè)試過程中,軟件測(cè)試系統(tǒng)發(fā)現(xiàn)測(cè)試對(duì)象存在缺陷,則將該測(cè)試用例從 基本測(cè)試用例庫移入進(jìn)階1測(cè)試用例庫,即,將該測(cè)試用例加入進(jìn)階1測(cè)試用例庫,并將該 測(cè)試用例從基本測(cè)試用例庫刪除。
[0062] 其中,測(cè)試對(duì)象存在缺陷,指的是能被該軟件測(cè)試系統(tǒng)明顯感知為漏洞(bug)的缺 陷,比如程序崩潰等。
[0063] 205、若發(fā)現(xiàn)測(cè)試對(duì)象存在缺陷的次數(shù)超過第一閾值,比如5次,則可以將該測(cè)試 用例從進(jìn)階1測(cè)試用例庫移入進(jìn)階2測(cè)試用例庫,S卩,將該測(cè)試用例加入進(jìn)階2測(cè)試用例 庫,并將該測(cè)試用例從進(jìn)階1測(cè)試用例庫刪除。
[0064] 其中,第一閾值可以根據(jù)實(shí)際應(yīng)用的需求進(jìn)行設(shè)置,在此不再贅述。
[0065] 206、若發(fā)現(xiàn)測(cè)試對(duì)象存在缺陷的次數(shù)超過第二閾值,比如10次,則將該測(cè)試用例 從進(jìn)階2測(cè)試用例庫移入進(jìn)階3測(cè)試用例庫,S卩,將該測(cè)試用例加入進(jìn)階3測(cè)試用例庫,并 將該測(cè)試用例從進(jìn)階2測(cè)試用例庫刪除。
[0066] 其中,第二閾值可以根據(jù)實(shí)際應(yīng)用的需求進(jìn)行設(shè)置,在此不再贅述。
[0067] 需說明的是,進(jìn)階測(cè)試用例庫的階數(shù)越高代表測(cè)試用例可以發(fā)現(xiàn)測(cè)試對(duì)象的缺陷 的次數(shù)越多,也就是說,該測(cè)試用例的價(jià)值就越高,其對(duì)應(yīng)被執(zhí)行的次數(shù)應(yīng)該越多(即被執(zhí) 行的概率越高)。
[0068] 此后,軟件測(cè)試系統(tǒng)就可以從基本測(cè)試用例庫和/或進(jìn)階測(cè)試用例庫中獲取這些 保存的測(cè)試用例對(duì)測(cè)試對(duì)象進(jìn)行測(cè)試,并根據(jù)測(cè)試結(jié)果及時(shí)對(duì)這些測(cè)試用例進(jìn)行進(jìn)化,t匕 如從基本測(cè)試用例庫移入進(jìn)階測(cè)試用例庫,或者從低階數(shù)的進(jìn)階測(cè)試用例庫移入高階數(shù)的 進(jìn)階測(cè)試用例庫,等等。需說明的是,本發(fā)明實(shí)施例中所舉例的"測(cè)試用例進(jìn)入基本測(cè)試用 例庫"的步驟(步驟202和203)為可選步驟,應(yīng)當(dāng)理解的是,也可以直接從基本測(cè)試用例庫 和/或進(jìn)階測(cè)試用例庫中獲取之前保存的測(cè)試用例對(duì)測(cè)試對(duì)象進(jìn)行測(cè)試,其后續(xù)步驟的執(zhí) 行與此類似,在此不再贅述。
[0069] 此外,還需說明的是,每個(gè)階段的測(cè)試過程可以以本地日志的形式記錄下來,這 樣,既方便用戶隨時(shí)進(jìn)行查看,也方便系統(tǒng)隨時(shí)進(jìn)行調(diào)用。
[0070] 由上可知,本實(shí)施例的軟件測(cè)試系統(tǒng)采用在對(duì)測(cè)試對(duì)象的控件進(jìn)行測(cè)試時(shí),以本 地日志的形式記錄測(cè)試過程,并在發(fā)現(xiàn)測(cè)試對(duì)象存在缺陷時(shí),記錄發(fā)現(xiàn)缺陷的次數(shù),然后根 據(jù)發(fā)現(xiàn)缺陷的次數(shù)將測(cè)試用例移入相應(yīng)的進(jìn)階測(cè)試用例庫中,其中,進(jìn)階測(cè)試用例庫的階 數(shù)與測(cè)試用例的執(zhí)行概率成正比,從而在一定程度上可以反映出測(cè)試用例的價(jià)值,以便用 戶選擇具有高價(jià)值的測(cè)試用例來進(jìn)行測(cè)試,提高測(cè)試時(shí)發(fā)現(xiàn)問題的能力;而且,由于記錄了 測(cè)試過程,所以提供了一種可以回歸驗(yàn)證軟件缺陷的能力,即在發(fā)現(xiàn)被測(cè)試的軟件存在缺 陷時(shí),可以通過相同的方式測(cè)試出現(xiàn)該缺陷,并進(jìn)化該相同的測(cè)試方式,此外,在發(fā)現(xiàn)缺陷 已經(jīng)被解決時(shí),還可以驗(yàn)證該缺陷是否已經(jīng)被解決。
[0071] 實(shí)施例三、
[0072] 為了更好地實(shí)施以上方法,本發(fā)明實(shí)施例還提供一種軟件測(cè)試系統(tǒng),如圖3所示, 該軟件測(cè)試系統(tǒng)包括控件獲取單元301、測(cè)試用例獲取單元302、測(cè)試單元303、記錄單元 304和處理單元305 ;
[0073] 控件獲取單元301,用于獲取測(cè)試對(duì)象中所有控件;
[0074] 其中,測(cè)試對(duì)象具體可以為各種軟件,比如客戶端軟件等;控件可以包括按鈕控 件、靜態(tài)鏈接控件、勾選框控件和/或列表控件等,在此不再列舉。
[0075] 測(cè)試用例獲取單元302,用于從基本測(cè)試用例庫和/或進(jìn)階測(cè)試用例庫中獲取測(cè) 試用例;
[0076] 其中,基本測(cè)試用例庫和進(jìn)階測(cè)試用例庫中的測(cè)試用例是以前進(jìn)行軟件測(cè)試時(shí)自 動(dòng)保存的測(cè)試用例,其中,基本測(cè)試用例庫保存的是最基本的測(cè)試用例,而進(jìn)階測(cè)試用例庫 保存的是發(fā)現(xiàn)了測(cè)試對(duì)象存在缺陷的測(cè)試用例,進(jìn)階測(cè)試用例庫可以包括多個(gè)不同階數(shù)的 測(cè)試用例庫,不同的階數(shù)對(duì)應(yīng)不同的"發(fā)現(xiàn)缺陷的次數(shù)"閾值,階數(shù)越高代表測(cè)試用例可以 發(fā)現(xiàn)測(cè)試對(duì)象的缺陷的次數(shù)越多。這是因?yàn)?,如果測(cè)試用例測(cè)試對(duì)象存在缺陷的次數(shù)越多, 就代表該測(cè)試用例越容易發(fā)現(xiàn)被測(cè)試對(duì)象所存在的缺陷,也就是說,該測(cè)試用例的價(jià)值就 越高,其對(duì)應(yīng)被執(zhí)行的次數(shù)應(yīng)該越多(即被執(zhí)行的概率越高),所以,其對(duì)應(yīng)的進(jìn)階測(cè)試用例 庫的階數(shù)(或者稱為層次)越高。
[0077] 測(cè)試單元303,用于利用測(cè)試用例對(duì)這些控件進(jìn)行測(cè)試;
[0078] 例如,測(cè)試單元303,具體可以從獲取到的所有控件中隨機(jī)獲取一些控件,并利用 測(cè)試用例對(duì)這些控件進(jìn)行測(cè)試。
[0079] 記錄單元304,用于記錄測(cè)試過程,若發(fā)現(xiàn)測(cè)試對(duì)象存在缺陷,則記錄發(fā)現(xiàn)缺陷的 次數(shù);
[0080] 例如,記錄單元304具體可以以本地日志的形式來記錄測(cè)試過程,這樣,既方便用 戶隨時(shí)進(jìn)行查看,也方便系統(tǒng)隨時(shí)進(jìn)行調(diào)用。
[0081] 其中,測(cè)試對(duì)象存在缺陷,指的是能被該軟件測(cè)試系統(tǒng)明顯感知為漏洞(bug)的缺 陷,比如程序崩潰等。
[0082] 處理單元305,用于根據(jù)發(fā)現(xiàn)缺陷的次數(shù)將測(cè)試用例移入相應(yīng)的進(jìn)階測(cè)試用例庫 中。
[0083] 其中,進(jìn)階測(cè)試用例庫的階數(shù)與測(cè)試用例的執(zhí)行概率成正比。例如,具體可以如 下:
[0084] 如果發(fā)現(xiàn)測(cè)試對(duì)象存在缺陷,則可以將該測(cè)試用例從基本測(cè)試用例庫移入進(jìn)階1 測(cè)試用例庫,即,將該測(cè)試用例加入進(jìn)階1測(cè)試用例庫,并將該測(cè)試用例從基本測(cè)試用例庫 刪除;
[0085] 如果處理單元305發(fā)現(xiàn)測(cè)試對(duì)象存在缺陷的次數(shù)超過第一閾值,比如5次,則處理 單元305可以將該測(cè)試用例從進(jìn)階1測(cè)試用例庫移入進(jìn)階2測(cè)試用例庫,S卩,將該測(cè)試用例 加入進(jìn)階2測(cè)試用例庫,并將該測(cè)試用例從進(jìn)階1測(cè)試用例庫刪除;
[0086] 如果處理單元305發(fā)現(xiàn)測(cè)試對(duì)象存在缺陷的次數(shù)超過第二閾值,比如10次,則處 理單元305可以將該測(cè)試用例從進(jìn)階2測(cè)試用例庫移入進(jìn)階3測(cè)試用例庫,S卩,將該測(cè)試用 例加入進(jìn)階3測(cè)試用例庫,并將該測(cè)試用例從進(jìn)階2測(cè)試用例庫刪除;
[0087] 同理,如果處理單元305發(fā)現(xiàn)測(cè)試對(duì)象存在缺陷的次數(shù)超過第三閾值,比如15次, 則處理單元305可以將該測(cè)試用例從進(jìn)階3測(cè)試用例庫移入進(jìn)階4測(cè)試用例庫,S卩,將該測(cè) 試用例加入進(jìn)階4測(cè)試用例庫,并將該測(cè)試用例從進(jìn)階3測(cè)試用例庫刪除,等等,以此類推。
[0088] 其中,進(jìn)階測(cè)試用例庫的階數(shù)可以由測(cè)試策略進(jìn)行定制,而各個(gè)階數(shù)所對(duì)應(yīng)的閾 值,比如第一閾值、第二閾值和第三閾值等,可以根據(jù)實(shí)際應(yīng)用的需求進(jìn)行設(shè)置,在此不再 贅述。
[0089] 此外,該軟件測(cè)試系統(tǒng)還可以包括保存單元;
[0090] 保存單元,可以用于按照預(yù)置步長模擬點(diǎn)擊所述控件,記錄每一個(gè)步長內(nèi)的點(diǎn)擊 過程,并作為測(cè)試用例保存在基本測(cè)試用例庫中。
[0091] 其中,步長指的是每個(gè)周期所能點(diǎn)擊控件的次數(shù),即點(diǎn)擊周期;該步長的大小可以 根據(jù)實(shí)際應(yīng)用的需求進(jìn)行設(shè)置,比如,可以設(shè)置為每個(gè)點(diǎn)擊周期為30次,等等。
[0092] 可選的,為了避免基本測(cè)試用例庫中存在重復(fù)的測(cè)試用例,節(jié)省存儲(chǔ)空間,以及提 高處理效率,在將測(cè)試用例庫保存在基本測(cè)試用例庫之前,還可以對(duì)測(cè)試用例作一個(gè)判斷, 即判斷基本測(cè)試用例庫中是否存在該測(cè)試用例,若存在,則無需將該測(cè)試用例保存在基本 測(cè)試用例庫中,若不存在,才將所述測(cè)試用例保存在基本測(cè)試用例庫中。即:
[0093] 該保存單元,具體可以用于確定基本測(cè)試用例庫中不存在該測(cè)試用例時(shí),將該測(cè) 試用例保存在基本測(cè)試用例庫中。
[0094] 具體實(shí)施時(shí),以上各個(gè)單元可以作為獨(dú)立的實(shí)體來實(shí)現(xiàn),也可以進(jìn)行任意組合,作 為同一或若干個(gè)實(shí)體來實(shí)現(xiàn),在此不再贅述。
[0095] 該軟件測(cè)試系統(tǒng)具體可以集成在個(gè)人計(jì)算機(jī)等設(shè)備。
[0096] 由上可知,本實(shí)施例的軟件測(cè)試系統(tǒng)采用在測(cè)試單元303對(duì)測(cè)試對(duì)象的控件進(jìn)行 測(cè)試時(shí),由記錄單元304記錄測(cè)試過程,并在發(fā)現(xiàn)測(cè)試對(duì)象存在缺陷時(shí),記錄發(fā)現(xiàn)缺陷的次 數(shù),然后由處理單元305根據(jù)發(fā)現(xiàn)缺陷的次數(shù)將測(cè)試用例移入相應(yīng)的進(jìn)階測(cè)試用例庫中, 其中,進(jìn)階測(cè)試用例庫的階數(shù)與測(cè)試用例的執(zhí)行概率成正比,從而在一定程度上可以反映 出測(cè)試用例的價(jià)值,以便用戶選擇具有高價(jià)值的測(cè)試用例來進(jìn)行測(cè)試,提高測(cè)試時(shí)發(fā)現(xiàn)問 題的能力;而且,由于記錄了測(cè)試過程,所以提供了一種可以回歸驗(yàn)證軟件缺陷的能力,即 在發(fā)現(xiàn)被測(cè)試的軟件存在缺陷時(shí),可以通過相同的方式測(cè)試出現(xiàn)該缺陷,并進(jìn)化該相同的 測(cè)試方式,此外,在發(fā)現(xiàn)缺陷已經(jīng)被解決時(shí),還可以驗(yàn)證該缺陷是否已經(jīng)被解決。
[0097] 本領(lǐng)域普通技術(shù)人員可以理解上述實(shí)施例的各種方法中的全部或部分步驟是可 以通過程序來指令相關(guān)的硬件來完成,該程序可以存儲(chǔ)于一計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)中,存 儲(chǔ)介質(zhì)可以包括:只讀存儲(chǔ)器(ROM,Read Only Memory)、隨機(jī)存取記憶體(RAM, Random Access Memory)、磁盤或光盤等。
[0098] 以上對(duì)本發(fā)明實(shí)施例所提供的一種軟件測(cè)試方法和系統(tǒng)進(jìn)行了詳細(xì)介紹,本文中 應(yīng)用了具體個(gè)例對(duì)本發(fā)明的原理及實(shí)施方式進(jìn)行了闡述,以上實(shí)施例的說明只是用于幫助 理解本發(fā)明的方法及其核心思想;同時(shí),對(duì)于本領(lǐng)域的技術(shù)人員,依據(jù)本發(fā)明的思想,在具 體實(shí)施方式及應(yīng)用范圍上均會(huì)有改變之處,綜上所述,本說明書內(nèi)容不應(yīng)理解為對(duì)本發(fā)明 的限制。
【權(quán)利要求】
1. 一種軟件測(cè)試方法,其特征在于,包括: 獲取測(cè)試對(duì)象中所有控件; 從基本測(cè)試用例庫和/或進(jìn)階測(cè)試用例庫中獲取測(cè)試用例; 利用所述測(cè)試用例對(duì)所述控件進(jìn)行測(cè)試,并記錄測(cè)試過程; 若發(fā)現(xiàn)測(cè)試對(duì)象存在缺陷,則記錄發(fā)現(xiàn)缺陷的次數(shù); 根據(jù)所述發(fā)現(xiàn)缺陷的次數(shù)將所述測(cè)試用例移入相應(yīng)的進(jìn)階測(cè)試用例庫中,所述進(jìn)階測(cè) 試用例庫的階數(shù)與測(cè)試用例的執(zhí)行概率成正比。
2. 根據(jù)權(quán)利要求1所述的方法,其特征在于,所述獲取測(cè)試對(duì)象中所有控件之后,還包 括: 按照預(yù)置步長模擬點(diǎn)擊所述控件; 記錄每一個(gè)步長內(nèi)的點(diǎn)擊過程,并作為測(cè)試用例保存在基本測(cè)試用例庫中。
3. 根據(jù)權(quán)利要求2所述的方法,其特征在于,所述作為測(cè)試用例保存在基本測(cè)試用例 庫中具體為: 確定基本測(cè)試用例庫中不存在所述測(cè)試用例時(shí),將所述測(cè)試用例保存在基本測(cè)試用例 庫中。
4. 根據(jù)權(quán)利要求1至3任一項(xiàng)所述的方法,其特征在于,所述記錄測(cè)試過程,包括: 以本地日志的形式記錄測(cè)試過程。
5. 根據(jù)權(quán)利要求1至3任一項(xiàng)所述的方法,其特征在于,所述控件包括: 按鈕控件、靜態(tài)鏈接控件、勾選框控件和/或列表控件。
6. -種軟件測(cè)試系統(tǒng),其特征在于,包括: 控件獲取單元,用于獲取測(cè)試對(duì)象中所有控件; 測(cè)試用例獲取單元,用于從基本測(cè)試用例庫和/或進(jìn)階測(cè)試用例庫中獲取測(cè)試用例; 測(cè)試單元,用于利用所述測(cè)試用例對(duì)所述控件進(jìn)行測(cè)試; 記錄單元,用于記錄測(cè)試過程,若發(fā)現(xiàn)測(cè)試對(duì)象存在缺陷,則記錄發(fā)現(xiàn)缺陷的次數(shù); 處理單元,用于根據(jù)所述發(fā)現(xiàn)缺陷的次數(shù)將所述測(cè)試用例移入相應(yīng)的進(jìn)階測(cè)試用例庫 中,所述進(jìn)階測(cè)試用例庫的階數(shù)與測(cè)試用例的執(zhí)行概率成正比。
7. 根據(jù)權(quán)利要求6所述的軟件測(cè)試系統(tǒng),其特征在于,還包括保存單元; 保存單元,用于按照預(yù)置步長模擬點(diǎn)擊所述控件,記錄每一個(gè)步長內(nèi)的點(diǎn)擊過程,并作 為測(cè)試用例保存在基本測(cè)試用例庫中。
8. 根據(jù)權(quán)利要求7所述的軟件測(cè)試系統(tǒng),其特征在于, 所述保存單元,具體用于確定基本測(cè)試用例庫中不存在所述測(cè)試用例時(shí),將所述測(cè)試 用例保存在基本測(cè)試用例庫中。
9. 根據(jù)權(quán)利要求6至8任一項(xiàng)所述的軟件測(cè)試系統(tǒng),其特征在于, 記錄單元,具體用于以本地日志的形式記錄測(cè)試過程。
10. 根據(jù)權(quán)利要求6至8任一項(xiàng)所述的軟件測(cè)試系統(tǒng),其特征在于,所述控件包括: 按鈕控件、靜態(tài)鏈接控件、勾選框控件和/或列表控件。
【文檔編號(hào)】G06F11/36GK104063307SQ201310088226
【公開日】2014年9月24日 申請(qǐng)日期:2013年3月19日 優(yōu)先權(quán)日:2013年3月19日
【發(fā)明者】徐志廣, 李葉 申請(qǐng)人:騰訊科技(深圳)有限公司
網(wǎng)友詢問留言 已有0條留言
  • 還沒有人留言評(píng)論。精彩留言會(huì)獲得點(diǎn)贊!
1
国产私拍福利视频在线观看| 国产高清国产精品国产三级 | 中文字幕人妻熟人妻熟丝袜美| 亚洲高清免费不卡视频| 久久久久精品久久久久真实原创| 熟妇人妻久久中文字幕3abv| 久久久a久久爽久久v久久| 干丝袜人妻中文字幕| 大香蕉97超碰在线| 国产黄片视频在线免费观看| 久久99热这里只频精品6学生 | 99久久无色码亚洲精品果冻| 丰满乱子伦码专区| 亚洲av免费在线观看| 深夜a级毛片| 中文天堂在线官网| 伦理电影大哥的女人| 啦啦啦韩国在线观看视频| 久久久久久久亚洲中文字幕| 中文字幕制服av| 国产成人aa在线观看| 禁无遮挡网站| 99国产精品一区二区蜜桃av| 激情 狠狠 欧美| 日韩欧美三级三区| 精品人妻视频免费看| 九九在线视频观看精品| 联通29元200g的流量卡| 色视频www国产| 日韩亚洲欧美综合| 一个人免费在线观看电影| 午夜福利成人在线免费观看| 美女cb高潮喷水在线观看| 午夜福利在线观看吧| 一二三四中文在线观看免费高清| 免费看美女性在线毛片视频| 噜噜噜噜噜久久久久久91| a级毛片免费高清观看在线播放| 免费电影在线观看免费观看| 哪个播放器可以免费观看大片| 精品一区二区三区人妻视频| av福利片在线观看| 波野结衣二区三区在线| 看免费成人av毛片| 久久精品国产亚洲av涩爱| 黄色一级大片看看| 日本熟妇午夜| 欧美激情久久久久久爽电影| 九草在线视频观看| 人妻制服诱惑在线中文字幕| 内射极品少妇av片p| 久久久久免费精品人妻一区二区| 麻豆一二三区av精品| 亚洲在线自拍视频| 高清毛片免费看| 国产精品蜜桃在线观看| 久热久热在线精品观看| 超碰97精品在线观看| a级毛色黄片| 三级毛片av免费| 亚洲一区高清亚洲精品| 日本黄色片子视频| 99热全是精品| 欧美色视频一区免费| 国产老妇伦熟女老妇高清| 午夜老司机福利剧场| 欧美成人一区二区免费高清观看| 六月丁香七月| 69av精品久久久久久| 亚洲aⅴ乱码一区二区在线播放| 久久久久精品久久久久真实原创| 色综合色国产| 色尼玛亚洲综合影院| 亚洲综合精品二区| 日本wwww免费看| 人体艺术视频欧美日本| 国产在线一区二区三区精 | 97超视频在线观看视频| 日韩国内少妇激情av| 精品一区二区三区视频在线| 亚洲国产欧美在线一区| 夫妻性生交免费视频一级片| 级片在线观看| 亚洲va在线va天堂va国产| 亚洲欧美成人综合另类久久久 | 3wmmmm亚洲av在线观看| 亚洲最大成人中文| 久久精品久久久久久久性| 桃色一区二区三区在线观看| 久久99热6这里只有精品| 99热全是精品| 高清毛片免费看| av线在线观看网站| 日韩欧美国产在线观看| 成人美女网站在线观看视频| 少妇的逼水好多| 看黄色毛片网站| 男女那种视频在线观看| 久久人妻av系列| 亚洲天堂国产精品一区在线| 内地一区二区视频在线| 又爽又黄无遮挡网站| 内地一区二区视频在线| 精品久久久久久成人av| 高清毛片免费看| 欧美成人精品欧美一级黄| 久久精品国产亚洲网站| 亚洲欧美日韩高清专用| videossex国产| 亚洲综合精品二区| 国产精品一区www在线观看| 亚洲国产精品成人久久小说| 中文字幕精品亚洲无线码一区| 乱系列少妇在线播放| 国产精品国产三级国产专区5o | 国产黄片美女视频| 人妻夜夜爽99麻豆av| 国产爱豆传媒在线观看| 亚洲精品久久久久久婷婷小说 | 国产一区二区在线av高清观看| 亚洲av福利一区| 亚洲熟妇中文字幕五十中出| 国产亚洲午夜精品一区二区久久 | 美女大奶头视频| 午夜福利在线在线| 午夜a级毛片| 日韩大片免费观看网站 | 亚洲四区av| 国产人妻一区二区三区在| 三级国产精品片| 中文字幕亚洲精品专区| 天堂影院成人在线观看| 国产免费又黄又爽又色| 国产精品野战在线观看| 国产伦理片在线播放av一区| www.av在线官网国产| 精品国产一区二区三区久久久樱花 | 三级男女做爰猛烈吃奶摸视频| 亚洲成人av在线免费| 欧美精品一区二区大全| 亚洲精品亚洲一区二区| 中文天堂在线官网| 亚洲欧美成人精品一区二区| 久久久久久久久久久丰满| 在线免费观看不下载黄p国产| av在线播放精品| 有码 亚洲区| 国产精品久久久久久精品电影| 人妻夜夜爽99麻豆av| 少妇高潮的动态图| 中文字幕av在线有码专区| 成人亚洲精品av一区二区| 久久久国产成人免费| 女人十人毛片免费观看3o分钟| 亚洲精品色激情综合| 国产精品福利在线免费观看| 欧美bdsm另类| 淫秽高清视频在线观看| 性插视频无遮挡在线免费观看| 三级毛片av免费| 最近最新中文字幕大全电影3| 欧美人与善性xxx| 亚洲电影在线观看av| 日韩人妻高清精品专区| 日本五十路高清| 亚洲怡红院男人天堂| 又粗又硬又长又爽又黄的视频| av在线天堂中文字幕| av国产久精品久网站免费入址| 国产亚洲精品久久久com| 国产69精品久久久久777片| 久热久热在线精品观看| 国产日韩欧美在线精品| 中文资源天堂在线| 美女脱内裤让男人舔精品视频| 国产精品国产三级专区第一集| 亚洲av成人精品一二三区| 亚洲国产欧美在线一区| 搡老妇女老女人老熟妇| 成人性生交大片免费视频hd| 免费看日本二区| 成人美女网站在线观看视频| 两性午夜刺激爽爽歪歪视频在线观看| 亚洲电影在线观看av| 搡女人真爽免费视频火全软件| 国产精品,欧美在线| 九九热线精品视视频播放| 国产高清有码在线观看视频| 久久国内精品自在自线图片| 免费看av在线观看网站| 99热精品在线国产| 一个人看视频在线观看www免费| 插逼视频在线观看| 国产精品无大码| 最近最新中文字幕免费大全7| 午夜亚洲福利在线播放| 毛片女人毛片| 中文字幕免费在线视频6| 18+在线观看网站| 一个人看的www免费观看视频| 国产高潮美女av| 免费av毛片视频| 深爱激情五月婷婷| 国产亚洲av嫩草精品影院| 成年免费大片在线观看| 啦啦啦韩国在线观看视频| 黄色配什么色好看| 日韩人妻高清精品专区| 国产私拍福利视频在线观看| 日本猛色少妇xxxxx猛交久久| 国模一区二区三区四区视频| 非洲黑人性xxxx精品又粗又长| 99久久人妻综合| 国产亚洲精品av在线| av福利片在线观看| 午夜日本视频在线| 久久久久久久久大av| 亚洲av电影在线观看一区二区三区 | 十八禁国产超污无遮挡网站| 特级一级黄色大片| 久久久亚洲精品成人影院| 久久精品夜夜夜夜夜久久蜜豆| 欧美日韩精品成人综合77777| 亚洲国产欧洲综合997久久,| 99久久无色码亚洲精品果冻| 嘟嘟电影网在线观看| 国产成人午夜福利电影在线观看| 国语自产精品视频在线第100页| 国产精品福利在线免费观看| 国产高清视频在线观看网站| 91久久精品国产一区二区成人| 亚洲欧美中文字幕日韩二区| 又爽又黄a免费视频| 亚洲最大成人中文| 国产一级毛片七仙女欲春2| 91av网一区二区| 亚洲内射少妇av| 99久久精品国产国产毛片| 99久久人妻综合| 久久久久国产网址| 国内精品美女久久久久久| 哪个播放器可以免费观看大片| 中国国产av一级| 简卡轻食公司| 精品国内亚洲2022精品成人| 岛国毛片在线播放| 国产极品天堂在线| 99在线人妻在线中文字幕| 一级毛片我不卡| 中文字幕免费在线视频6| 欧美日本视频| 边亲边吃奶的免费视频| 国产成人91sexporn| 99国产精品一区二区蜜桃av| 成人二区视频| 91精品一卡2卡3卡4卡| 国产免费福利视频在线观看| 色综合亚洲欧美另类图片| 搡老妇女老女人老熟妇| 精品人妻熟女av久视频| 久久99热6这里只有精品| 尤物成人国产欧美一区二区三区| 亚洲成av人片在线播放无| 国产极品天堂在线| 欧美精品国产亚洲| 99在线视频只有这里精品首页| 少妇裸体淫交视频免费看高清| 国产人妻一区二区三区在| 成人美女网站在线观看视频| 精品国产一区二区三区久久久樱花 | 日日撸夜夜添| 精品久久国产蜜桃| 一级毛片我不卡| 久久久久久久国产电影| 亚洲av中文字字幕乱码综合| av在线蜜桃| 99热网站在线观看| 免费搜索国产男女视频| 干丝袜人妻中文字幕| 尾随美女入室| 久久99精品国语久久久| 一级二级三级毛片免费看| 国产精品美女特级片免费视频播放器| 精品人妻一区二区三区麻豆| 成年版毛片免费区| 免费播放大片免费观看视频在线观看 | 美女黄网站色视频| 国产老妇伦熟女老妇高清| 国产在视频线在精品| 一个人看视频在线观看www免费| 日韩精品青青久久久久久| 九九久久精品国产亚洲av麻豆| 男女视频在线观看网站免费| 国产精品久久电影中文字幕| 亚洲色图av天堂| 亚洲国产精品专区欧美| 99在线人妻在线中文字幕| 长腿黑丝高跟| 亚洲av福利一区| 国产av在哪里看| 高清午夜精品一区二区三区| 日本三级黄在线观看| 男人狂女人下面高潮的视频| 国产在线一区二区三区精 | 国产精品一区二区性色av| 七月丁香在线播放| 毛片女人毛片| 久久久精品大字幕| 日本黄色视频三级网站网址| 国产成人免费观看mmmm| av国产久精品久网站免费入址| 直男gayav资源| 白带黄色成豆腐渣| 久久婷婷人人爽人人干人人爱| 中文字幕熟女人妻在线| 国产亚洲一区二区精品| 亚洲最大成人中文| 久久99热这里只有精品18| 亚洲最大成人手机在线| 国产欧美日韩精品一区二区| 国产乱人视频| 国产黄色小视频在线观看| 久久精品国产亚洲av天美| 看十八女毛片水多多多| 自拍偷自拍亚洲精品老妇| 91久久精品国产一区二区三区| 日本一二三区视频观看| 天堂网av新在线| 两个人的视频大全免费| 亚洲av福利一区| 狠狠狠狠99中文字幕| 九九爱精品视频在线观看| 精品国产露脸久久av麻豆 | 日本黄大片高清| 亚洲国产欧美人成| 又爽又黄无遮挡网站| 欧美激情久久久久久爽电影| 久久婷婷人人爽人人干人人爱| 亚洲va在线va天堂va国产| 99久久精品一区二区三区| av在线观看视频网站免费| 日韩成人av中文字幕在线观看| 国产精品久久久久久久久免| 久久久久国产网址| 日韩大片免费观看网站 | 赤兔流量卡办理| 日产精品乱码卡一卡2卡三| 在线观看美女被高潮喷水网站| 成年av动漫网址| 熟女电影av网| 国产一区二区在线av高清观看| 99热这里只有是精品在线观看| 久久久久国产网址| 日日撸夜夜添| 好男人在线观看高清免费视频| 欧美变态另类bdsm刘玥| 国产精品国产三级专区第一集| 欧美zozozo另类| 又爽又黄a免费视频| 人人妻人人澡欧美一区二区| 18禁在线无遮挡免费观看视频| 天堂网av新在线| 欧美日本亚洲视频在线播放| 免费搜索国产男女视频| 亚洲在线观看片| 午夜日本视频在线| 国产视频首页在线观看| 中文字幕免费在线视频6| 亚洲欧美精品自产自拍| 亚洲内射少妇av| 国产黄色视频一区二区在线观看 | 全区人妻精品视频| av又黄又爽大尺度在线免费看 | 精品久久久久久久人妻蜜臀av| 国产精品福利在线免费观看| 欧美xxxx黑人xx丫x性爽| 精品人妻一区二区三区麻豆| 亚洲精品日韩在线中文字幕| 国产黄片视频在线免费观看| 99热这里只有是精品50| 亚洲精品日韩在线中文字幕| 久久6这里有精品| 午夜精品一区二区三区免费看| 男人舔奶头视频| 一二三四中文在线观看免费高清| 丝袜喷水一区| 人人妻人人澡欧美一区二区| 欧美激情在线99| 99热精品在线国产| 婷婷色综合大香蕉| 春色校园在线视频观看| 看黄色毛片网站| 热99在线观看视频| 午夜爱爱视频在线播放| 免费看光身美女| av又黄又爽大尺度在线免费看 | 久久久欧美国产精品| 国内揄拍国产精品人妻在线| 亚洲国产精品成人久久小说| 少妇高潮的动态图| 99在线人妻在线中文字幕| 国产v大片淫在线免费观看| 国产成人精品久久久久久| 亚洲最大成人av| 国产大屁股一区二区在线视频| 日韩av不卡免费在线播放| 性插视频无遮挡在线免费观看| 国产伦精品一区二区三区四那| 日韩中字成人| 免费观看的影片在线观看| 国产成人一区二区在线| 亚洲伊人久久精品综合 | 大又大粗又爽又黄少妇毛片口| 成人三级黄色视频| 亚洲综合精品二区| 亚洲在久久综合| 亚洲av福利一区| 成年av动漫网址| 久久欧美精品欧美久久欧美| 午夜老司机福利剧场| 国产成人一区二区在线| 波多野结衣高清无吗| 性色avwww在线观看| 国产伦在线观看视频一区| 精品久久久久久电影网 | 成人毛片a级毛片在线播放| 午夜亚洲福利在线播放| 国产 一区 欧美 日韩| 久久99蜜桃精品久久| 亚洲最大成人手机在线| 国产成人freesex在线| 一边亲一边摸免费视频| 国产精品久久久久久久久免| 国产免费一级a男人的天堂| 一个人观看的视频www高清免费观看| 亚洲人成网站在线观看播放| 日韩制服骚丝袜av| 免费在线观看成人毛片| 在线天堂最新版资源| 在线观看美女被高潮喷水网站| 精品久久久噜噜| 欧美日韩精品成人综合77777| 成人性生交大片免费视频hd| 一个人看的www免费观看视频| 男女国产视频网站| 在线免费观看不下载黄p国产| 特大巨黑吊av在线直播| 久久久亚洲精品成人影院| 精品久久久久久久末码| 国产亚洲精品av在线| 免费av毛片视频| 国产单亲对白刺激| 欧美一区二区精品小视频在线| 男女视频在线观看网站免费| 中国美白少妇内射xxxbb| 国产黄a三级三级三级人| 国产高清三级在线| 亚洲怡红院男人天堂| 亚洲欧美精品综合久久99| 午夜福利高清视频| 91精品伊人久久大香线蕉| 日韩欧美精品v在线| 精品久久久久久久末码| 特级一级黄色大片| 欧美性猛交黑人性爽| 国产免费又黄又爽又色| 亚洲美女视频黄频| 国产单亲对白刺激| 国产av在哪里看| 久久精品夜色国产| 精品国产露脸久久av麻豆 | 少妇被粗大猛烈的视频| 99在线视频只有这里精品首页| 成人亚洲欧美一区二区av| 精品免费久久久久久久清纯| 国产在线男女| av又黄又爽大尺度在线免费看 | 一级黄色大片毛片| 美女xxoo啪啪120秒动态图| 亚洲av中文字字幕乱码综合| 亚洲一级一片aⅴ在线观看| 亚洲美女搞黄在线观看| 午夜福利在线在线| 久久久久九九精品影院| 日韩,欧美,国产一区二区三区 | 国产在线男女| 国产成年人精品一区二区| 国产精品蜜桃在线观看| 蜜臀久久99精品久久宅男| 51国产日韩欧美| 纵有疾风起免费观看全集完整版 | 一边亲一边摸免费视频| 国产精品麻豆人妻色哟哟久久 | 男女下面进入的视频免费午夜| 麻豆精品久久久久久蜜桃| 欧美一区二区精品小视频在线| 免费观看的影片在线观看| 免费av不卡在线播放| 69人妻影院| 国产精品不卡视频一区二区| 亚洲国产欧洲综合997久久,| 高清在线视频一区二区三区 | 女人十人毛片免费观看3o分钟| 国产伦在线观看视频一区| 最近视频中文字幕2019在线8| 成人午夜精彩视频在线观看| 欧美精品国产亚洲| av在线老鸭窝| 亚洲综合色惰| 高清毛片免费看| 日本wwww免费看| 精品99又大又爽又粗少妇毛片| 国产精品无大码| 桃色一区二区三区在线观看| 久久久午夜欧美精品| 久99久视频精品免费| 高清午夜精品一区二区三区| 18禁在线无遮挡免费观看视频| 色综合色国产| 最近中文字幕高清免费大全6| 日本熟妇午夜| 国产黄色小视频在线观看| 亚洲,欧美,日韩| 国产高清国产精品国产三级 | 色网站视频免费| 日韩av在线大香蕉| 女人久久www免费人成看片 | www.av在线官网国产| 一个人免费在线观看电影| 尾随美女入室| 激情 狠狠 欧美| 日韩欧美在线乱码| 久久久久久大精品| 久久这里有精品视频免费| 国产一区二区在线av高清观看| 啦啦啦韩国在线观看视频| 日日撸夜夜添| 国产日韩欧美在线精品| 久久久久久久久久黄片| 男女那种视频在线观看| 国产高清视频在线观看网站| 精品国内亚洲2022精品成人| 男女边吃奶边做爰视频| 午夜视频国产福利| a级毛片免费高清观看在线播放| 久久这里有精品视频免费| 国产一区二区在线av高清观看| 亚洲av中文字字幕乱码综合| 变态另类丝袜制服| 看片在线看免费视频| 亚洲av电影在线观看一区二区三区 | 国产精品不卡视频一区二区| av在线天堂中文字幕| 国产精品99久久久久久久久| 狠狠狠狠99中文字幕| 国产精品一区二区三区四区免费观看| 一区二区三区四区激情视频| 欧美激情国产日韩精品一区| 最近中文字幕高清免费大全6| 三级经典国产精品| 国产精品久久视频播放| 中文亚洲av片在线观看爽| 免费观看的影片在线观看| 1000部很黄的大片| 少妇人妻精品综合一区二区| 日韩av在线免费看完整版不卡| 最近2019中文字幕mv第一页| 22中文网久久字幕| 午夜激情福利司机影院| 日本免费一区二区三区高清不卡| 51国产日韩欧美| 久久久久久九九精品二区国产| 午夜激情欧美在线| av在线观看视频网站免费| 少妇熟女欧美另类| 自拍偷自拍亚洲精品老妇| 一级av片app| 国产精品av视频在线免费观看| 高清在线视频一区二区三区 | 男人舔女人下体高潮全视频| 国产精品1区2区在线观看.| 国产免费视频播放在线视频 | 久久99蜜桃精品久久| 极品教师在线视频| 久久这里只有精品中国| 国产大屁股一区二区在线视频| 国内揄拍国产精品人妻在线| 国产大屁股一区二区在线视频| 爱豆传媒免费全集在线观看| 亚洲国产精品久久男人天堂| av国产免费在线观看| 美女高潮的动态| 午夜a级毛片| 韩国av在线不卡| 精华霜和精华液先用哪个| 久久精品国产亚洲av天美| 少妇人妻一区二区三区视频| 中文字幕免费在线视频6| 亚洲国产精品sss在线观看| 特大巨黑吊av在线直播| 天天躁夜夜躁狠狠久久av| 老司机影院成人| 欧美精品一区二区大全| 日韩亚洲欧美综合| 久久精品人妻少妇| 日韩 亚洲 欧美在线| 国产成人精品无人区| 亚洲五月色婷婷综合| 久久免费观看电影| 三级国产精品片| 亚洲av欧美aⅴ国产| 国产精品一二三区在线看| 午夜av观看不卡| 亚洲伊人久久精品综合| 国产日韩欧美在线精品|