[發明專利]一種輸入方法及裝置在審
| 申請號: | 201910828531.2 | 申請日: | 2019-09-03 |
| 公開(公告)號: | CN112446265A | 公開(公告)日: | 2021-03-05 |
| 發明(設計)人: | 王丹;崔欣 | 申請(專利權)人: | 北京搜狗科技發展有限公司 |
| 主分類號: | G06K9/00 | 分類號: | G06K9/00;G06F3/01 |
| 代理公司: | 北京集佳知識產權代理有限公司 11227 | 代理人: | 柳欣 |
| 地址: | 100084 北京市海淀區中關*** | 國省代碼: | 北京;11 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 一種 輸入 方法 裝置 | ||
1.一種輸入方法,其特征在于,所述方法包括:
采集用戶視頻數據,所述用戶視頻數據包括用戶面部視頻數據和/或用戶手部視頻數據;
識別所述用戶視頻數據包括的表達信息;
將所述表達信息作為候選項進行顯示。
2.根據權利要求1所述的方法,其特征在于,所述識別所述用戶視頻數據包括的表達信息,包括:
對所述用戶視頻數據進行分類,獲得視頻分類結果;
根據所述視頻分類結果識別所述用戶視頻數據包括的表達信息。
3.根據權利要求2所述的方法,其特征在于,所述根據所述視頻分類結果識別所述用戶視頻數據包括的表達信息,包括:
當所述視頻分類結果包括面部表情視頻數據時,根據所述面部表情視頻數據中的用戶面部特征確定對應的表達信息;
當所述視頻分類結果包括唇語視頻數據時,根據所述唇語視頻數據中的唇形特征確定發音,并根據所述發音確定對應的表達信息;
當所述視頻分類結果包括手勢視頻數據時,根據所述手勢視頻數據包括的用戶手部特征確定對應的表達信息;
當所述視頻分類結果包括手語視頻數據時,根據所述手語視頻數據中的用戶手部特征確定對應的語義,并根據所述語義確定對應的表達信息。
4.根據權利要求3所述的方法,其特征在于,所述對所述用戶視頻數據進行分類,獲得視頻分類結果,包括:
從所述用戶視頻數據提取用戶面部特征和/或用戶手部特征;
根據所述用戶面部特征和/所述用戶手部特征,確定所述視頻分類結果。
5.根據權利要求4所述的方法,其特征在于,所述根據所述用戶面部特征和/或所述用戶手部特征,確定所述視頻分類結果,包括:
當所述用戶視頻數據包括所述用戶面部特征時,如果所述用戶面部特征中唇形特征連續變化,所述視頻分類結果包括唇語視頻數據;否則,所述視頻分類結果包括面部表情視頻數據;
當所述用戶視頻數據包括所述用戶手部特征時,如果所述用戶手部特征連續變化,所述視頻分類結果包括手語視頻數據;否則,所述視頻分類結果包括手勢視頻數據。
6.根據權利要求1所述的方法,其特征在于,所述識別所述用戶視頻數據包括的表達信息,包括:
識別所述用戶視頻數據中是否包括用戶面部特征,如果包括所述用戶面部特征,根據所述用戶面部特征確定對應的表達信息;
識別所述用戶視頻數據中是否包括用戶面部特征,如果包括所述用戶面部特征,判斷所述用戶面部特征中的唇形特征是否連續變化,如果所述唇形特征連續變化,根據所述唇形特征確定發音,并根據所述發音確定對應的表達信息;
識別所述用戶視頻數據中是否包括用戶手部特征,如果包括所述用戶手部特征,根據所述用戶手部特征確定對應的表達信息;
識別所述用戶手部視頻數據中是否包括用戶手部特征,如果包括所述用戶手部特征,判斷所述用戶手部特征是否連續變化,如果所述用戶手部特征連續變化,根據所述用戶手部特征確定對應的語義,并根據所述語義確定對應的表達信息。
7.根據權利要求1-6任一項所述的方法,其特征在于,所述表達信息包括表達文本、圖像、表情中的一個或多個。
8.一種輸入裝置,其特征在于,所述裝置包括:
采集單元,用于采集用戶視頻數據,所述用戶視頻數據包括用戶面部視頻數據和/或用戶手部視頻數據;
識別單元,用于識別所述用戶視頻數據包括的表達信息;
顯示單元,用于將所述表達信息作為候選項進行顯示。
9.一種用于輸入的裝置,其特征在于,包括有存儲器,以及一個或者一個以上的程序,其中一個或者一個以上程序存儲于存儲器中,且經配置以由一個或者一個以上處理器執行所述一個或者一個以上程序包含用于進行以下操作的指令:
采集用戶視頻數據,所述用戶視頻數據包括用戶面部視頻數據和/或用戶手部視頻數據;
識別所述用戶視頻數據包括的表達信息;
將所述表達信息作為候選項進行顯示。
10.一種計算機可讀介質,其上存儲有指令,當由一個或多個處理器執行時,使得裝置執行如權利要求1至7中任一項所述的輸入方法。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于北京搜狗科技發展有限公司,未經北京搜狗科技發展有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.17sss.com.cn/pat/books/201910828531.2/1.html,轉載請聲明來源鉆瓜專利網。





