[發明專利]一種行為識別方法、裝置、機器可讀介質及設備有效
| 申請號: | 202110023419.9 | 申請日: | 2021-01-08 |
| 公開(公告)號: | CN112613490B | 公開(公告)日: | 2022-02-01 |
| 發明(設計)人: | 郝冬冬 | 申請(專利權)人: | 云從科技集團股份有限公司 |
| 主分類號: | G06V40/10 | 分類號: | G06V40/10;G06V40/20;G06V10/25;G06V10/46;G06V10/764;G06K9/62;G06N3/04;G06N3/08 |
| 代理公司: | 上海光華專利事務所(普通合伙) 31219 | 代理人: | 李鐵 |
| 地址: | 511457 廣東省廣州市南*** | 國省代碼: | 廣東;44 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 一種 行為 識別 方法 裝置 機器 可讀 介質 設備 | ||
1.一種行為識別方法,其特征在于,包括:
對待處理的目標對象的圖片進行人體檢測,得到人體ROI區域;
對所述人體ROI區域進行特征提取,得到人體關鍵點;
基于所述人體關鍵點,得到行為參數以及姿態參數;
根據所述行為參數與所述姿態參數識別目標對象的行為;
通過預訓練的關鍵點模型的特征提取層對所述人體ROI區域進行特征提取,得到人體關鍵點;
所述姿態參數的獲取方法包括:
根據所述人體關鍵點以及連接于所述特征提取層后的關鍵點回歸分支得到人體關鍵點參數,并根據所述關鍵點參數得到所述姿態參數;其中,所述人體關鍵點參數包括關鍵點的可見度類別以及關鍵點位置;
該方法還包括:
根據所述人體關鍵點參數獲取人體關鍵點完整度;
基于所述人體關鍵點完整度對所述人體關鍵點進行篩選;
所述人體關鍵點完整度的獲取方法包括:
為不同位置的人體關鍵點設置相應的權重;
基于所述人體關鍵點的權重、關鍵點可見度類別得到人體關鍵點完整度。
2.根據權利要求1所述的行為識別方法,其特征在于,所述行為參數包括行為類別以及行為類別得分,所述姿態參數包括姿態類別以及姿態類別得分。
3.根據權利要求1所述的行為識別方法,其特征在于,所述行為參數的獲取方法包括:
根據所述人體關鍵點以及連接于所述特征提取層后的行為分類分支得到行為參數。
4.根據權利要求1所述的行為識別方法,其特征在于,所述特征提取層的結構為Resnet18或VGG,行為分類分支的結構為全連接層或1x1卷積結構,所述關鍵點回歸分支的結構為全連接層或1x1卷積結構。
5.根據權利要求1所述的行為識別方法,其特征在于,所述可見度類別包括:可見可預測、不可見可預測、不可見不可預測。
6.根據權利要求1所述的行為識別方法,其特征在于,所述基于所述人體關鍵點完整度對所述人體關鍵點進行篩選,包括:保留人體關鍵點完整度超過設定的完整度閾值的人體關鍵點。
7.根據權利要求2所述的行為識別方法,其特征在于,所述根據所述行為參數與所述姿態參數識別目標對象的行為,包括:
若所述姿態類別與所述行為類別一致,則以所述姿態類別或所述行為類別作為目標對象的行為,且行為得分等于所述行為類別得分與所述姿態類別得分和的一半;
若所述姿態類別與所述行為類別不一致,且所述行為類別得分大于或等于設定閾值,則所述行為類別為所述目標對象的行為;
若所述姿態類別與所述行為類別不一致,且所述行為類別得分小于設定閾值,則所述姿態類別為所述目標對象的行為。
8.一種行為識別裝置,其特征在于,包括:
人體檢測模塊,用于對待處理的目標對象的圖片進行人體檢測,得到人體ROI區域;
特征提取模塊,用于對所述人體ROI區域進行特征提取,得到人體關鍵點;
參數獲取模塊,用于基于所述人體關鍵點,得到行為參數以及姿態參數;
行為識別模塊,用于根據所述行為參數與所述姿態參數識別目標對象的行為;
所述參數獲取模塊通過預訓練的關鍵點模型的特征提取層對所述人體ROI區域進行特征提取,得到人體關鍵點;
所述參數獲取模塊還包括姿態參數獲取模塊,用于根據所述人體關鍵點以及連接于所述特征提取層后的關鍵點回歸分支得到人體關鍵點參數,并根據所述關鍵點參數得到所述姿態參數;其中,所述人體關鍵點參數包括關鍵點的可見度類別以及關鍵點位置;
根據所述人體關鍵點參數獲取人體關鍵點完整度;
基于所述人體關鍵點完整度對所述人體關鍵點進行篩選,得到人體關鍵點;
所述人體關鍵點完整度的獲取方法包括:
為不同位置的人體關鍵點設置相應的權重;
基于所述人體關鍵點的權重、關鍵點可見度類別得到人體關鍵點完整度。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于云從科技集團股份有限公司,未經云從科技集團股份有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.17sss.com.cn/pat/books/202110023419.9/1.html,轉載請聲明來源鉆瓜專利網。
- 上一篇:一種美術用隱藏式調色盤
- 下一篇:一種固液兩相一體化沼氣發酵設備





