[發(fā)明專利]繪本識別方法、裝置及機器人在審
| 申請?zhí)枺?/td> | 202010461267.6 | 申請日: | 2020-05-27 |
| 公開(公告)號: | CN111695453A | 公開(公告)日: | 2020-09-22 |
| 發(fā)明(設(shè)計)人: | 顧景;李揚;王玥;程駿;龐建新;熊友軍 | 申請(專利權(quán))人: | 深圳市優(yōu)必選科技股份有限公司 |
| 主分類號: | G06K9/00 | 分類號: | G06K9/00;G06K9/46;G06K9/62;G06N3/04 |
| 代理公司: | 深圳中一聯(lián)合知識產(chǎn)權(quán)代理有限公司 44414 | 代理人: | 肖遙 |
| 地址: | 518000 廣東省深圳市南山區(qū)*** | 國省代碼: | 廣東;44 |
| 權(quán)利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關(guān)鍵詞: | 識別 方法 裝置 機器人 | ||
1.一種繪本識別方法,其特征在于,包括:
獲取待識別繪本的特征點數(shù)量;
根據(jù)所述特征點數(shù)量劃分所述待識別繪本的繪本類型,所述繪本類型包括:第一類型繪本和第二類型繪本,其中,所述第一類型繪本的特征點數(shù)量小于預(yù)設(shè)的數(shù)量閾值,所述第二類型繪本的特征點數(shù)量大于或等于預(yù)設(shè)的數(shù)量閾值;
若所述待識別繪本的繪本類型為第一類型繪本,則通過基于卷積神經(jīng)網(wǎng)絡(luò)模型的特征比對算法識別所述第一類型繪本;
若所述待識別繪本的繪本類型為第二類型繪本,則通過非基于卷積神經(jīng)網(wǎng)絡(luò)模型的特征比對算法識別所述第二類型繪本。
2.如權(quán)利要求1所述的繪本識別方法,其特征在于,在所述通過基于卷積神經(jīng)網(wǎng)絡(luò)模型的特征比對算法識別所述第一類型繪本之前,或,在所述通過非基于卷積神經(jīng)網(wǎng)絡(luò)模型的特征比對算法識別所述第二類型繪本之前,包括:
獲取所述待識別繪本的封面圖像;
根據(jù)所述封面圖像獲取待識別繪本的基本信息,所述基本信息至少包括書名信息、作者信息和出版社信息中的任意一種;
根據(jù)所述待識別繪本的基本信息對所述待識別繪本進行初次篩選,得到初次篩選結(jié)果;
對應(yīng)地,所述通過基于卷積神經(jīng)網(wǎng)絡(luò)模型的特征比對算法識別所述第一類型繪本具體包括:
以所述初次篩選結(jié)果為依據(jù),通過基于卷積神經(jīng)網(wǎng)絡(luò)模型的特征比對算法識別所述第一類型繪本;
對應(yīng)地,所述通過非基于卷積神經(jīng)網(wǎng)絡(luò)模型的特征比對算法識別所述第二類型繪本包括:
以所述初次篩選結(jié)果為依據(jù),通過非基于卷積神經(jīng)網(wǎng)絡(luò)模型的特征比對算法識別所述第二類型繪本。
3.如權(quán)利要求2所述的繪本識別方法,其特征在于,以所述初次篩選結(jié)果為依據(jù),所述通過基于卷積神經(jīng)網(wǎng)絡(luò)模型的特征比對算法識別所述第一類型繪本,包括:
獲取所述第一類型繪本中將要識別的內(nèi)頁的圖像;
從所述內(nèi)頁的圖像中截取第一預(yù)設(shè)個數(shù)的區(qū)域圖像;
根據(jù)已訓(xùn)練的卷積神經(jīng)網(wǎng)絡(luò)模型從所述內(nèi)頁的圖像以及所述區(qū)域圖像中分別提取特征向量;
將提取的特征向量分別與數(shù)據(jù)庫存儲的特征向量匹配,所述數(shù)據(jù)庫存儲的特征向量為所述初次篩選結(jié)果所包括的繪本的特征向量;
若所述數(shù)據(jù)庫存儲的特征向量存在與所述提取的特征向量匹配的特征向量,且匹配的特征向量指向的匹配類別中存在第二預(yù)設(shè)個數(shù)的相同的匹配類別,則輸出所述第一類型繪本的識別結(jié)果,其中,所述匹配類別為匹配的特征向量指向的類別,所述識別結(jié)果包括所述相同的匹配類別的類別信息,其中,一張內(nèi)頁對應(yīng)一個類別。
4.如權(quán)利要求3所述的繪本識別方法,其特征在于,所述則輸出所述第一類型繪本的識別結(jié)果,包括:
若所述第二預(yù)設(shè)個數(shù)的相同的匹配類別對應(yīng)的特征向量之間的距離小于或等于預(yù)設(shè)的距離閾值,則輸出所述第一類型繪本的識別結(jié)果。
5.如權(quán)利要求3所述的繪本識別方法,其特征在于,所述卷積神經(jīng)網(wǎng)絡(luò)模型根據(jù)以下方式訓(xùn)練:
采集不同繪本的每一張內(nèi)頁的N張圖像,N大于1;
對采集的所有圖像進行數(shù)據(jù)增強,數(shù)據(jù)增強后的圖像作為訓(xùn)練樣本;
根據(jù)所述訓(xùn)練樣本以及深度學(xué)習(xí)分類網(wǎng)絡(luò)對待訓(xùn)練的卷積神經(jīng)網(wǎng)絡(luò)模型進行訓(xùn)練,且挖掘訓(xùn)練過程中的難分類樣本,其中,所述難分類樣本是指采用所述深度學(xué)習(xí)分類網(wǎng)絡(luò)對訓(xùn)練樣本分類后,分類準(zhǔn)確率低于預(yù)設(shè)分類閾值所對應(yīng)的訓(xùn)練樣本;
根據(jù)所述難分類樣本以及所述深度學(xué)習(xí)分類網(wǎng)絡(luò)繼續(xù)對所述待訓(xùn)練的卷積神經(jīng)網(wǎng)絡(luò)模型進行訓(xùn)練,直到所述深度學(xué)習(xí)分類網(wǎng)絡(luò)對所述難分類樣本的分類準(zhǔn)確率大于或等于預(yù)設(shè)分類閾值。
6.如權(quán)利要求1至5任一項所述的繪本識別方法,其特征在于,所述獲取待識別繪本的特征點數(shù)量,包括:
獲取待識別繪本任一內(nèi)頁的特征點數(shù)量;
或者,
獲取待識別繪本的所有內(nèi)頁的特征點數(shù)量,并根據(jù)獲取的所有內(nèi)頁的特征點數(shù)量確定單張內(nèi)頁的平均特征點數(shù)量,所述單張內(nèi)頁的平均特征點數(shù)量作為待識別繪本的特征點數(shù)量。
該專利技術(shù)資料僅供研究查看技術(shù)是否侵權(quán)等信息,商用須獲得專利權(quán)人授權(quán)。該專利全部權(quán)利屬于深圳市優(yōu)必選科技股份有限公司,未經(jīng)深圳市優(yōu)必選科技股份有限公司許可,擅自商用是侵權(quán)行為。如果您想購買此專利、獲得商業(yè)授權(quán)和技術(shù)合作,請聯(lián)系【客服】
本文鏈接:http://www.17sss.com.cn/pat/books/202010461267.6/1.html,轉(zhuǎn)載請聲明來源鉆瓜專利網(wǎng)。
- 同類專利
- 專利分類
G06K 數(shù)據(jù)識別;數(shù)據(jù)表示;記錄載體;記錄載體的處理
G06K9-00 用于閱讀或識別印刷或書寫字符或者用于識別圖形,例如,指紋的方法或裝置
G06K9-03 .錯誤的檢測或校正,例如,用重復(fù)掃描圖形的方法
G06K9-18 .應(yīng)用具有附加代碼標(biāo)記或含有代碼標(biāo)記的打印字符的,例如,由不同形狀的各個筆畫組成的,而且每個筆畫表示不同的代碼值的字符
G06K9-20 .圖像捕獲
G06K9-36 .圖像預(yù)處理,即無須判定關(guān)于圖像的同一性而進行的圖像信息處理
G06K9-60 .圖像捕獲和多種預(yù)處理作用的組合





