[發(fā)明專(zhuān)利]網(wǎng)頁(yè)資源的獲取方法、裝置及終端有效
| 申請(qǐng)?zhí)枺?/td> | 201711270485.6 | 申請(qǐng)日: | 2017-12-05 |
| 公開(kāi)(公告)號(hào): | CN109948087B | 公開(kāi)(公告)日: | 2021-11-16 |
| 發(fā)明(設(shè)計(jì))人: | 陳巖;劉耀勇 | 申請(qǐng)(專(zhuān)利權(quán))人: | OPPO廣東移動(dòng)通信有限公司 |
| 主分類(lèi)號(hào): | G06F16/957 | 分類(lèi)號(hào): | G06F16/957;G06F16/955;G06F16/953 |
| 代理公司: | 北京三高永信知識(shí)產(chǎn)權(quán)代理有限責(zé)任公司 11138 | 代理人: | 牟慧仙 |
| 地址: | 523860 廣東*** | 國(guó)省代碼: | 廣東;44 |
| 權(quán)利要求書(shū): | 查看更多 | 說(shuō)明書(shū): | 查看更多 |
| 摘要: | |||
| 搜索關(guān)鍵詞: | 網(wǎng)頁(yè) 資源 獲取 方法 裝置 終端 | ||
1.一種網(wǎng)頁(yè)資源的獲取方法,其特征在于,所述方法包括:
獲取至少一個(gè)歷史網(wǎng)頁(yè)地址,所述歷史網(wǎng)頁(yè)地址是指在歷史周期內(nèi)訪問(wèn)過(guò)的網(wǎng)頁(yè)地址;
檢測(cè)各個(gè)歷史網(wǎng)頁(yè)地址在歷史周期內(nèi)的訪問(wèn)總次數(shù)是否大于預(yù)設(shè)次數(shù);
若所述歷史網(wǎng)頁(yè)地址在所述歷史周期內(nèi)的訪問(wèn)總次數(shù)大于所述預(yù)設(shè)次數(shù),獲取所述歷史網(wǎng)頁(yè)地址在所述歷史周期內(nèi)的第一次訪問(wèn)時(shí)間戳和最后一次訪問(wèn)時(shí)間戳;
計(jì)算所述第一次訪問(wèn)時(shí)間戳和所述最后一次訪問(wèn)時(shí)間戳之間的間隔時(shí)長(zhǎng);
根據(jù)所述歷史網(wǎng)頁(yè)地址在所述歷史周期內(nèi)的訪問(wèn)總次數(shù)和所述間隔時(shí)長(zhǎng),計(jì)算所述歷史網(wǎng)頁(yè)地址的訪問(wèn)頻率;
若所述歷史網(wǎng)頁(yè)地址的訪問(wèn)頻率大于預(yù)設(shè)頻率,則選取所述歷史網(wǎng)頁(yè)地址作為常用網(wǎng)頁(yè)地址;
下載所述常用網(wǎng)頁(yè)地址對(duì)應(yīng)的網(wǎng)頁(yè)資源;
提取所述常用網(wǎng)頁(yè)地址對(duì)應(yīng)的網(wǎng)頁(yè)資源中包含的目標(biāo)網(wǎng)頁(yè)地址;
下載第1輪提取的目標(biāo)網(wǎng)頁(yè)地址對(duì)應(yīng)的網(wǎng)頁(yè)資源;
提取所述第1輪提取的目標(biāo)網(wǎng)頁(yè)地址對(duì)應(yīng)的網(wǎng)頁(yè)資源中包含的目標(biāo)網(wǎng)頁(yè)地址;
下載第2輪提取的目標(biāo)網(wǎng)頁(yè)地址對(duì)應(yīng)的網(wǎng)頁(yè)資源,以此類(lèi)推,直至已存儲(chǔ)的網(wǎng)頁(yè)資源的數(shù)據(jù)量大于預(yù)設(shè)數(shù)據(jù)量時(shí)停止下載;
存儲(chǔ)預(yù)加載網(wǎng)頁(yè)地址對(duì)應(yīng)的網(wǎng)頁(yè)資源,所述預(yù)加載網(wǎng)頁(yè)地址包括所述常用網(wǎng)頁(yè)地址和所述目標(biāo)網(wǎng)頁(yè)地址,其中,所述預(yù)加載網(wǎng)頁(yè)地址對(duì)應(yīng)的網(wǎng)頁(yè)資源在滿(mǎn)足停止下載條件時(shí)停止下載,所述停止下載條件包括網(wǎng)頁(yè)資源的數(shù)據(jù)量大于預(yù)設(shè)數(shù)據(jù)量、爬取輪數(shù)大于預(yù)設(shè)輪數(shù)、所述目標(biāo)網(wǎng)頁(yè)地址的數(shù)量大于預(yù)設(shè)數(shù)量、終端剩余的存儲(chǔ)容量小于預(yù)設(shè)容量中的至少一種;且所述預(yù)加載網(wǎng)頁(yè)地址對(duì)應(yīng)的資源更新時(shí)長(zhǎng)為動(dòng)態(tài)時(shí)長(zhǎng),且所述資源更新時(shí)長(zhǎng)基于相鄰兩次下載的所述預(yù)加載網(wǎng)頁(yè)地址的網(wǎng)頁(yè)資源的變化情況確定,其中,當(dāng)網(wǎng)頁(yè)資源發(fā)生變化時(shí),所述資源更新時(shí)長(zhǎng)縮短,當(dāng)網(wǎng)頁(yè)資源未發(fā)生變化時(shí),所述資源更新時(shí)長(zhǎng)增長(zhǎng)。
2.根據(jù)權(quán)利要求1所述的方法,其特征在于,所述存儲(chǔ)預(yù)加載網(wǎng)頁(yè)地址對(duì)應(yīng)的網(wǎng)頁(yè)資源之后,還包括:
對(duì)于每一個(gè)預(yù)加載網(wǎng)頁(yè)地址,獲取所述預(yù)加載網(wǎng)頁(yè)地址對(duì)應(yīng)的資源更新時(shí)長(zhǎng);
當(dāng)所述預(yù)加載網(wǎng)頁(yè)地址對(duì)應(yīng)的網(wǎng)頁(yè)資源的已存儲(chǔ)時(shí)長(zhǎng)達(dá)到所述預(yù)加載網(wǎng)頁(yè)地址對(duì)應(yīng)的資源更新時(shí)長(zhǎng)時(shí),重新下載所述預(yù)加載網(wǎng)頁(yè)地址對(duì)應(yīng)的網(wǎng)頁(yè)資源;
采用重新下載的所述預(yù)加載網(wǎng)頁(yè)地址對(duì)應(yīng)的網(wǎng)頁(yè)資源,對(duì)已存儲(chǔ)的所述預(yù)加載網(wǎng)頁(yè)地址對(duì)應(yīng)的網(wǎng)頁(yè)資源進(jìn)行更新。
3.根據(jù)權(quán)利要求2所述的方法,其特征在于,所述獲取所述預(yù)加載網(wǎng)頁(yè)地址對(duì)應(yīng)的資源更新時(shí)長(zhǎng),包括:
當(dāng)所述預(yù)加載網(wǎng)頁(yè)地址對(duì)應(yīng)的網(wǎng)頁(yè)資源的已存儲(chǔ)時(shí)長(zhǎng)達(dá)到所述預(yù)加載網(wǎng)頁(yè)地址對(duì)應(yīng)的第i次資源更新時(shí)長(zhǎng)時(shí),重新下載所述預(yù)加載網(wǎng)頁(yè)地址對(duì)應(yīng)的網(wǎng)頁(yè)資源,其中,所述i的初始值為1,第1次資源更新時(shí)長(zhǎng)為預(yù)先設(shè)定的值;
檢測(cè)重新下載的所述預(yù)加載網(wǎng)頁(yè)地址對(duì)應(yīng)的網(wǎng)頁(yè)資源相對(duì)于已存儲(chǔ)的所述預(yù)加載網(wǎng)頁(yè)地址對(duì)應(yīng)的網(wǎng)頁(yè)資源是否發(fā)生變化;
若未發(fā)生變化,則確定所述預(yù)加載網(wǎng)頁(yè)地址對(duì)應(yīng)的第i+1次資源更新時(shí)長(zhǎng),所述第i+1次資源更新時(shí)長(zhǎng)大于所述第i次資源更新時(shí)長(zhǎng);令i=i+1,并再次從所述當(dāng)所述預(yù)加載網(wǎng)頁(yè)地址對(duì)應(yīng)的網(wǎng)頁(yè)資源的已存儲(chǔ)時(shí)長(zhǎng)達(dá)到所述預(yù)加載網(wǎng)頁(yè)地址對(duì)應(yīng)的第i次資源更新時(shí)長(zhǎng)時(shí),重新下載所述預(yù)加載網(wǎng)頁(yè)地址對(duì)應(yīng)的網(wǎng)頁(yè)資源的步驟開(kāi)始執(zhí)行,直至重新下載的所述預(yù)加載網(wǎng)頁(yè)地址對(duì)應(yīng)的網(wǎng)頁(yè)資源相對(duì)于已存儲(chǔ)的所述預(yù)加載網(wǎng)頁(yè)地址對(duì)應(yīng)的網(wǎng)頁(yè)資源發(fā)生變化時(shí),將第1次至第i-1次資源更新時(shí)長(zhǎng)相加,得到所述預(yù)加載網(wǎng)頁(yè)地址對(duì)應(yīng)的資源更新時(shí)長(zhǎng);
若已發(fā)生變化,則確定所述預(yù)加載網(wǎng)頁(yè)地址對(duì)應(yīng)的第i+1次資源更新時(shí)長(zhǎng),所述第i+1次資源更新時(shí)長(zhǎng)小于所述第i次資源更新時(shí)長(zhǎng);令i=i+1,再次從所述當(dāng)所述預(yù)加載網(wǎng)頁(yè)地址對(duì)應(yīng)的網(wǎng)頁(yè)資源的已存儲(chǔ)時(shí)長(zhǎng)達(dá)到所述預(yù)加載網(wǎng)頁(yè)地址對(duì)應(yīng)的第i次資源更新時(shí)長(zhǎng)時(shí),重新下載所述預(yù)加載網(wǎng)頁(yè)地址對(duì)應(yīng)的網(wǎng)頁(yè)資源的步驟開(kāi)始執(zhí)行,直至重新下載的所述預(yù)加載網(wǎng)頁(yè)地址對(duì)應(yīng)的網(wǎng)頁(yè)資源相對(duì)于已存儲(chǔ)的所述預(yù)加載網(wǎng)頁(yè)地址對(duì)應(yīng)的網(wǎng)頁(yè)資源未發(fā)生變化時(shí),將第i次資源更新時(shí)長(zhǎng)確定為所述預(yù)加載網(wǎng)頁(yè)地址對(duì)應(yīng)的資源更新時(shí)長(zhǎng)。
該專(zhuān)利技術(shù)資料僅供研究查看技術(shù)是否侵權(quán)等信息,商用須獲得專(zhuān)利權(quán)人授權(quán)。該專(zhuān)利全部權(quán)利屬于OPPO廣東移動(dòng)通信有限公司,未經(jīng)OPPO廣東移動(dòng)通信有限公司許可,擅自商用是侵權(quán)行為。如果您想購(gòu)買(mǎi)此專(zhuān)利、獲得商業(yè)授權(quán)和技術(shù)合作,請(qǐng)聯(lián)系【客服】
本文鏈接:http://www.17sss.com.cn/pat/books/201711270485.6/1.html,轉(zhuǎn)載請(qǐng)聲明來(lái)源鉆瓜專(zhuān)利網(wǎng)。
- 一種搜索網(wǎng)頁(yè)的方法和裝置
- 網(wǎng)頁(yè)類(lèi)型識(shí)別方法以及網(wǎng)頁(yè)類(lèi)型識(shí)別裝置
- 網(wǎng)頁(yè)生成方法及網(wǎng)頁(yè)生成裝置
- 網(wǎng)頁(yè)修改方法及網(wǎng)頁(yè)修改裝置
- 網(wǎng)頁(yè)訪問(wèn)處理方法
- 獲取網(wǎng)頁(yè)信息方法和裝置
- 網(wǎng)頁(yè)資源的獲取方法、裝置及終端
- 一種網(wǎng)頁(yè)制作方法、系統(tǒng)、可讀存儲(chǔ)介質(zhì)及服務(wù)器
- 網(wǎng)頁(yè)安全處理方法、裝置、設(shè)備和存儲(chǔ)介質(zhì)
- 一種網(wǎng)頁(yè)同步的方法、系統(tǒng)
- 一種數(shù)據(jù)庫(kù)讀寫(xiě)分離的方法和裝置
- 一種手機(jī)動(dòng)漫人物及背景創(chuàng)作方法
- 一種通訊綜合測(cè)試終端的測(cè)試方法
- 一種服裝用人體測(cè)量基準(zhǔn)點(diǎn)的獲取方法
- 系統(tǒng)升級(jí)方法及裝置
- 用于虛擬和接口方法調(diào)用的裝置和方法
- 線程狀態(tài)監(jiān)控方法、裝置、計(jì)算機(jī)設(shè)備和存儲(chǔ)介質(zhì)
- 一種JAVA智能卡及其虛擬機(jī)組件優(yōu)化方法
- 檢測(cè)程序中方法耗時(shí)的方法、裝置及存儲(chǔ)介質(zhì)
- 函數(shù)的執(zhí)行方法、裝置、設(shè)備及存儲(chǔ)介質(zhì)





