[發明專利]視頻檢索方法、裝置、設備和介質有效
| 申請號： | 202010018056.5 | 申請日： | 2020-01-08 |
| 公開（公告）號： | CN113094550B | 公開（公告）日： | 2023-10-24 |
| 發明（設計）人： | 楊羿;李一;王書敬;劉杰;于探;陳曉冬;劉林;朱延峰;李平 | 申請（專利權）人： | 百度在線網絡技術（北京）有限公司 |
| 主分類號： | G06F16/78 | 分類號： | G06F16/78;G06F16/783;G06F40/30;G06V10/74;G06V20/70;G06V20/40 |
| 代理公司： | 北京品源專利代理有限公司 11332 | 代理人： | 孟金喆 |
| 地址： | 100085 北京市*** | 國省代碼： | 北京;11 |
| 權利要求書： | 查看更多 | 說明書： | 查看更多 |
| 摘要： | |||
| 搜索關鍵詞： | 視頻 檢索 方法 裝置 設備 介質 | ||
1.一種視頻檢索方法，其特征在于，包括：
基于文本語義空間和視頻語義空間之間的轉換關系，根據查詢文本和候選視頻，確定所述查詢文本的統一空間特征和所述候選視頻的統一空間特征；根據所述查詢文本的統一空間特征和所述候選視頻的統一空間特征，確定所述查詢文本和所述候選視頻的相似度；
根據所述相似度從所述候選視頻中選擇目標視頻，并將所述目標視頻作為查詢結果。
2.根據權利要求1所述的方法，其特征在于，所述基于文本語義空間和視頻語義空間之間的轉換關系，根據查詢文本和候選視頻，確定所述查詢文本的統一空間特征和所述候選視頻的統一空間特征，包括：
基于所述文本語義空間，確定所述查詢文本的文本空間特征；
基于所述視頻語義空間，確定所述候選視頻的視頻空間特征；
基于所述文本語義空間和所述視頻語義空間之間的轉換關系，對所述文本空間特征和所述視頻空間特征進行空間統一，以得到統一空間特征。
3.根據權利要求2所述的方法，其特征在于，所述基于視頻語義空間，確定所述候選視頻的視頻空間特征，包括：
確定候選視頻幀中目標實體的目標特征；
根據所述目標實體的出現信息，以及所述目標特征，確定所述候選視頻的稠密特征；
將所述目標實體在所述候選視頻幀中的位置信息、所述目標實體的面積和所述候選視頻幀的發生順序中的至少一種，與所述稠密特征進行組合，以得到所述候選視頻的視頻空間特征。
4.根據權利要求3所述的方法，其特征在于，所述確定候選視頻幀中目標實體的目標特征，包括：
確定所述候選視頻幀中目標實體的候選特征；
對確定的候選特征進行聚類，以將確定的候選特征與所述目標實體關聯；
基于所述候選特征的置信度，從與所述目標實體關聯的候選特征中，確定所述目標實體的目標特征。
5.根據權利要求2所述的方法，其特征在于，所述基于所述文本語義空間和所述視頻語義空間之間的轉換關系，對所述文本空間特征和所述視頻空間特征進行空間統一，以得到統一空間特征，包括：
基于所述文本語義空間和所述視頻語義空間之間的轉換關系，將所述文本空間特征投射到所述視頻語義空間；和/或
基于所述文本語義空間和所述視頻語義空間之間的轉換關系，將所述視頻空間特征投射到所述文本語義空間。
6.根據權利要求5所述的方法，其特征在于，所述基于所述文本語義空間和所述視頻語義空間之間的轉換關系，將所述文本空間特征投射到所述視頻語義空間，包括：
基于所述文本語義空間和所述視頻語義空間之間的轉換關系，根據所述文本空間特征和所述視頻空間特征，計算所述查詢文本中查詢詞在所述視頻語義空間下的語義分布。
7.根據權利要求6所述的方法，其特征在于，所述基于所述文本語義空間和所述視頻語義空間之間的轉換關系，根據所述文本空間特征和所述視頻空間特征，計算所述查詢文本中查詢詞在所述視頻語義空間下的語義分布，包括：
將所述文本空間特征作為輸入特征，將所述視頻空間特征作為輸出特征，將所述輸入特征和所述輸出特征輸入預先訓練的轉換器模型中，輸出所述查詢文本中查詢詞在所述視頻語義空間下的語義分布。
8.根據權利要求1所述的方法，其特征在于，所述根據所述查詢文本的統一空間特征和所述候選視頻的統一空間特征，確定所述查詢文本和所述候選視頻的相似度，包括：
基于統一空間特征，計算所查詢文本中查詢詞與所述候選視頻的詞語相似度；
根據查詢詞在所述檢索輸入文本中的重要度，確定所述詞語的權重；
根據確定的權重，對所述詞語相似度進行加權求和，得到所述查詢文本與所述候選視頻的相似度。
該專利技術資料僅供研究查看技術是否侵權等信息，商用須獲得專利權人授權。該專利全部權利屬于百度在線網絡技術（北京）有限公司，未經百度在線網絡技術（北京）有限公司許可，擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作，請聯系【客服】
本文鏈接：http://www.17sss.com.cn/pat/books/202010018056.5/1.html，轉載請聲明來源鉆瓜專利網。
- 上一篇：一種按摩機
- 下一篇：一種基于斜裝深度相機的目標檢測與跟蹤方法及系統
