[發(fā)明專(zhuān)利]一種基于深度學(xué)習(xí)的雙流法行為識(shí)別方法及系統(tǒng)有效
| 申請(qǐng)?zhí)枺?/td> | 202010088264.2 | 申請(qǐng)日: | 2020-02-12 |
| 公開(kāi)(公告)號(hào): | CN111325253B | 公開(kāi)(公告)日: | 2023-05-05 |
| 發(fā)明(設(shè)計(jì))人: | 馬潤(rùn)杰;楊宇克 | 申請(qǐng)(專(zhuān)利權(quán))人: | 杭州涂鴉信息技術(shù)有限公司 |
| 主分類(lèi)號(hào): | G06V10/764 | 分類(lèi)號(hào): | G06V10/764;G06V10/40;G06V10/82;G06N3/0464;G06N3/08 |
| 代理公司: | 北京崇智知識(shí)產(chǎn)權(quán)代理有限公司 11605 | 代理人: | 任小燕 |
| 地址: | 310013 浙江省杭*** | 國(guó)省代碼: | 浙江;33 |
| 權(quán)利要求書(shū): | 查看更多 | 說(shuō)明書(shū): | 查看更多 |
| 摘要: | |||
| 搜索關(guān)鍵詞: | 一種 基于 深度 學(xué)習(xí) 雙流 行為 識(shí)別 方法 系統(tǒng) | ||
1.一種基于深度學(xué)習(xí)的雙流法行為識(shí)別方法,其特征在于,包括:
根據(jù)光流卷積神經(jīng)網(wǎng)絡(luò)訓(xùn)練集,獲取光流動(dòng)作特征,包括:
獲取光流識(shí)別圖,具體為:獲取多組連續(xù)的圖像幀組,每個(gè)圖像幀組包括b個(gè)連續(xù)的圖像幀,b為大于1的自然數(shù);
通過(guò)a個(gè)卷積層,對(duì)多組圖像幀組分別提取光流動(dòng)作特征;
分別輸入所述多組圖像幀組對(duì)應(yīng)的所述光流動(dòng)作特征至第一全連接層,并分別獲得第一分類(lèi);
在所述第一分類(lèi)下,分別輸入所述多組圖像幀組對(duì)應(yīng)的所述光流動(dòng)作特征至第二全連接層,并分別獲得第二分類(lèi),并分別獲得第一分類(lèi)值;
其中,a為自然數(shù),且所述a個(gè)卷積層中的最后一個(gè)卷積層與RGB流動(dòng)作對(duì)應(yīng)的卷積層的維數(shù)相同;
根據(jù)RGB流卷積神經(jīng)網(wǎng)絡(luò)訓(xùn)練集,獲取RGB流動(dòng)作特征,包括:
獲取RGB流識(shí)別圖;
通過(guò)c個(gè)卷積層,提取RGB流動(dòng)作特征;
輸入所述RGB流動(dòng)作特征至第一全連接層,獲得第二分類(lèi);
在所述第一分類(lèi)下,輸入所述RGB流動(dòng)作特征至第二全連接層,獲得第二分類(lèi),并獲得第二分類(lèi)值;
其中,c為自然數(shù),且所述a個(gè)卷積層中的最后一個(gè)卷積層與所述c個(gè)卷積層中的最后一個(gè)卷積層的維數(shù)相同;
融合所述光流動(dòng)作特征及所述RGB流動(dòng)作特征,獲取融合動(dòng)作特征,包括:
將所述a個(gè)卷積層中的最后一個(gè)卷積層的特征圖與所述c個(gè)卷積層中的最后一個(gè)卷積層的特征圖的對(duì)應(yīng)的特征點(diǎn)的特征值相加;
根據(jù)所述所述光流動(dòng)作特征、所述RGB流動(dòng)作特征及所述融合動(dòng)作特征獲取行為類(lèi)別,包括:
計(jì)算所述多組圖像幀組所對(duì)應(yīng)的第一分類(lèi)值的平均值,并通過(guò)歸一化獲取所述第一分類(lèi)值的平均值所對(duì)應(yīng)的不同動(dòng)作的可能性百分比;
通過(guò)歸一化獲取所述第二分類(lèi)值對(duì)應(yīng)的不同動(dòng)作的可能性百分比;
訓(xùn)練第三全連接層及第四全連接層;
通過(guò)所述第三全連接層及所述第四全連接層獲取第三分類(lèi)值,并歸一化獲取所述第三分類(lèi)值對(duì)應(yīng)的不同動(dòng)作的可能性百分比;
將所述第一分類(lèi)值的平均值所對(duì)應(yīng)的不同動(dòng)作的可能性百分比、所述第二分類(lèi)值對(duì)應(yīng)的不同動(dòng)作的可能性百分比及所述第三分類(lèi)值對(duì)應(yīng)的不同動(dòng)作的可能性百分比中,對(duì)應(yīng)相同動(dòng)作的百分比相加,獲得相同動(dòng)作的動(dòng)作值;
判定所述動(dòng)作值最大的動(dòng)作為待識(shí)別動(dòng)作的行為類(lèi)別;
其中,獲取光流動(dòng)作特征時(shí),光流動(dòng)作對(duì)應(yīng)的卷積層與獲取RGB流動(dòng)作特征時(shí),所述RGB流動(dòng)作對(duì)應(yīng)的卷積層的維數(shù)相同,所述RGB流識(shí)別圖與第一個(gè)所述圖像幀組中的第一個(gè)圖像幀相同。
該專(zhuān)利技術(shù)資料僅供研究查看技術(shù)是否侵權(quán)等信息,商用須獲得專(zhuān)利權(quán)人授權(quán)。該專(zhuān)利全部權(quán)利屬于杭州涂鴉信息技術(shù)有限公司,未經(jīng)杭州涂鴉信息技術(shù)有限公司許可,擅自商用是侵權(quán)行為。如果您想購(gòu)買(mǎi)此專(zhuān)利、獲得商業(yè)授權(quán)和技術(shù)合作,請(qǐng)聯(lián)系【客服】
本文鏈接:http://www.17sss.com.cn/pat/books/202010088264.2/1.html,轉(zhuǎn)載請(qǐng)聲明來(lái)源鉆瓜專(zhuān)利網(wǎng)。
- 上一篇:電子裝置
- 下一篇:一種汽車(chē)零部件輔助焊接裝置
- 根據(jù)用戶(hù)學(xué)習(xí)效果動(dòng)態(tài)變化下載學(xué)習(xí)數(shù)據(jù)的系統(tǒng)及方法
- 用于智能個(gè)人化學(xué)習(xí)服務(wù)的方法
- 漸進(jìn)式學(xué)習(xí)管理方法及漸進(jìn)式學(xué)習(xí)系統(tǒng)
- 輔助學(xué)習(xí)的方法及裝置
- 基于人工智能的課程推薦方法、裝置、設(shè)備及存儲(chǔ)介質(zhì)
- 基于強(qiáng)化學(xué)習(xí)的自適應(yīng)移動(dòng)學(xué)習(xí)路徑生成方法
- 一種線(xiàn)上視頻學(xué)習(xí)系統(tǒng)
- 一種基于校園大數(shù)據(jù)的自適應(yīng)學(xué)習(xí)方法、裝置及設(shè)備
- 一種學(xué)習(xí)方案推薦方法、裝置、設(shè)備和存儲(chǔ)介質(zhì)
- 游戲?qū)W習(xí)效果評(píng)測(cè)方法及系統(tǒng)





