[發(fā)明專利]雙語詞庫的自動更新方法、裝置與電子設備有效
| 申請?zhí)枺?/td> | 201811330508.2 | 申請日： | 2018-11-09 |
| 公開（公告）號： | CN109857746B | 公開（公告）日： | 2021-05-04 |
| 發(fā)明（設計）人： | 李靖 | 申請（專利權）人： | 語聯(lián)網（武漢）信息技術有限公司 |
| 主分類號： | G06F16/23 | 分類號： | G06F16/23 |
| 代理公司： | 北京路浩知識產權代理有限公司 11002 | 代理人： | 王瑩;吳歡燕 |
| 地址： | 430000 湖北省武漢市東湖開發(fā)區(qū)光谷軟件*** | 國省代碼： | 湖北;42 |
| 權利要求書： | 查看更多 | 說明書： | 查看更多 |
| 摘要： | |||
| 搜索關鍵詞： | 雙語 詞庫 自動更新 方法 裝置 電子設備 | ||
1.一種雙語詞庫的自動更新方法，其特征在于，包括：
利用基于LSTM的識別模型，從雙語源數據中識別出潛在雙語詞對，所述雙語源數據是從無詞對應關系的信息源采集獲取的；
獲取對所述潛在雙語詞對的人工確認結果，并基于所述人工確認結果，篩選出所述潛在雙語詞對中確信度達到設定閾值的雙語詞對，所述人工確認是人工對所述潛在雙語詞對的正確性進行標注和確認；
利用所述確信度達到設定閾值的雙語詞對，更新當前雙語詞庫，并基于所述人工確認結果和更新后的雙語詞庫，進一步訓練并更新所述基于LSTM的識別模型，以供下一次更新識別使用。
2.根據權利要求1所述的方法，其特征在于，在所述利用基于LSTM的識別模型，從雙語源數據中識別出潛在雙語詞對的步驟之前，還包括：
從有詞對應關系的信息源采集帶標注的雙語詞對，并從無詞對應關系的信息源采集所述雙語源數據；
相應的，所述獲取對所述潛在雙語詞對的人工確認結果的步驟還包括：獲取對所述帶標注的雙語詞對的人工確認結果。
3.根據權利要求1所述的方法，其特征在于，在所述更新當前雙語詞庫的步驟之后，還包括：
基于對所述更新后的雙語詞庫的使用反饋信息，確定所述更新后的雙語詞庫中各雙語詞對的置信度，并基于所述置信度，對所述更新后的雙語詞庫進行管理。
4.根據權利要求1-3中任一項所述的方法，其特征在于，所述利用基于LSTM的識別模型，從雙語源數據中識別出潛在雙語詞對的步驟具體包括：
基于所述雙語源數據，進行雙語句子間的對齊抽取；
利用所述基于LSTM的識別模型，從所述雙語句子中識別雙語中的關鍵詞，并實現(xiàn)雙語中各關鍵詞的雙語對應。
5.根據權利要求2所述的方法，其特征在于，所述獲取對所述潛在雙語詞對的人工確認結果的步驟具體包括：
對于任一所述潛在雙語詞對或者帶標注的雙語詞對，獲取用戶對該潛在雙語詞對或者帶標注的雙語詞對的人工標注，并基于所述人工標注，訓練并更新標注學習模型；
利用更新后的標注學習模型，對各所述潛在雙語詞對和所述帶標注的雙語詞對進行確信度計算，獲取所述人工確認結果。
6.根據權利要求3所述的方法，其特征在于，所述基于對所述更新后的雙語詞庫的使用反饋信息，確定所述更新后的雙語詞庫中各雙語詞對的置信度，并基于所述置信度，對所述更新后的雙語詞庫進行管理的步驟具體包括：
獲取給定時間段內對所述更新后的雙語詞庫中的雙語詞對的使用記錄，并采集所述使用記錄相關的使用者信息和雙語詞對信息，作為所述使用反饋信息；
基于所述使用反饋信息，對所述更新后的雙語詞庫中各雙語詞進行打分，確定所述置信度；
若所述置信度不小于第一置信閾值，則對該置信度對應的雙語詞對進行置信標記，并不再對該雙語詞對進行打分，若所述置信度小于第二置信閾值，則將該置信度對應的雙語詞對從所述更新后的雙語詞庫中刪除，若所述置信度小于所述第一置信閾值且不小于所述第二置信閾值，則保留該置信度對應的雙語詞對，等待下次打分。
7.一種雙語詞庫的自動更新裝置，其特征在于，包括：
詞對識別模塊，用于利用基于LSTM的識別模型，從雙語源數據中識別出潛在雙語詞對，所述雙語源數據是從無詞對應關系的信息源采集獲取的；
詞對篩選模塊，用于獲取對所述潛在雙語詞對的人工確認結果，并基于所述人工確認結果，篩選出所述潛在雙語詞對中確信度達到設定閾值的雙語詞對，所述人工確認是人工對所述潛在雙語詞對的正確性進行標注和確認；
更新模塊，用于利用所述確信度達到設定閾值的雙語詞對，更新當前雙語詞庫，并基于所述人工確認結果和更新后的雙語詞庫，進一步訓練并更新所述基于LSTM的識別模型，以供下一次更新識別使用。
該專利技術資料僅供研究查看技術是否侵權等信息，商用須獲得專利權人授權。該專利全部權利屬于語聯(lián)網（武漢）信息技術有限公司，未經語聯(lián)網（武漢）信息技術有限公司許可，擅自商用是侵權行為。如果您想購買此專利、獲得商業(yè)授權和技術合作，請聯(lián)系【客服】
本文鏈接：http://www.17sss.com.cn/pat/books/201811330508.2/1.html，轉載請聲明來源鉆瓜專利網。
