[發(fā)明專利]基于多個機(jī)器學(xué)習(xí)模型的自然語言處理方法、裝置和設(shè)備有效
| 申請?zhí)枺?/td> | 202011182212.8 | 申請日: | 2020-10-29 |
| 公開(公告)號: | CN112287662B | 公開(公告)日: | 2023-10-20 |
| 發(fā)明(設(shè)計)人: | 駱加維;吳信朝;周宸;周寶;陳遠(yuǎn)旭 | 申請(專利權(quán))人: | 平安科技(深圳)有限公司 |
| 主分類號: | G06F40/205 | 分類號: | G06F40/205;G06N20/00 |
| 代理公司: | 深圳市明日今典知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 44343 | 代理人: | 王杰輝;宋慶洪 |
| 地址: | 518000 廣東省深圳市福田區(qū)福*** | 國省代碼: | 廣東;44 |
| 權(quán)利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關(guān)鍵詞: | 基于 機(jī)器 學(xué)習(xí) 模型 自然語言 處理 方法 裝置 設(shè)備 | ||
1.一種基于多個機(jī)器學(xué)習(xí)模型的自然語言處理方法,其特征在于,包括:
將待識別的文本數(shù)據(jù)輸入到多個不同的詞向量訓(xùn)練機(jī)器學(xué)習(xí)模型,得到基于每個詞的多個相互獨(dú)立的詞向量訓(xùn)練結(jié)果;
基于每個詞的多個訓(xùn)練結(jié)果,計算每個詞的詞向量的中心向量和偏正向量;
根據(jù)每個詞對應(yīng)的所述中心向量和所述偏正向量,計算得到每個詞的糾偏詞向量;
基于每個詞的糾偏詞向量進(jìn)行自然語言處理任務(wù)。
2.根據(jù)權(quán)利要求1所述的基于多個機(jī)器學(xué)習(xí)模型的自然語言處理方法,其特征在于,所述多個不同的詞向量訓(xùn)練機(jī)器學(xué)習(xí)模型的數(shù)量為2個,所述基于每個詞的多個訓(xùn)練結(jié)果,計算每個詞的詞向量的中心向量和偏正向量的步驟包括:
計算2個所述詞向量訓(xùn)練模型的輸出的同一個詞的詞向量每一個維度的偏差量bias,計算公式為bias(a)=(xa-ya),其中1≤a≤n,n為詞向量的維度,bias(a)為第a個維度的偏差量,xa、ya分別表示2個詞向量第a個維度的特征值;
獲取不同維度的偏差量的偏差序列的中位數(shù)m;
利用公式計算出平均偏正量debias;
利用公式得到所述中心向量VCentor,其中VCentor(a)表示所述中心向量第a個維度的特征值;
利用公式Voffset(a)=(-1)n*debias得到所述偏正向量Voffset,其中Voffset(a)表示所述偏正向量第a個維度的特征值。
3.根據(jù)權(quán)利要求1所述的基于多個機(jī)器學(xué)習(xí)模型的自然語言處理方法,其特征在于,所述多個不同的詞向量訓(xùn)練機(jī)器學(xué)習(xí)模型的數(shù)量為3個,所述基于每個詞的多個訓(xùn)練結(jié)果,計算每個詞的詞向量的中心向量和偏正向量的步驟包括:
計算3個所述詞向量訓(xùn)練模型的輸出的同一個詞的詞向量在每一個維度的偏差量,計算公式為其中表示在二維坐標(biāo)系中(xa-1,xa)、(ya-1,ya)、(za-1,za)3點(diǎn)組成的圓的半徑和(xa,xa+1)、(ya,ya+1)、(za,za+1)3點(diǎn)組成的圓的半徑的平均值,其中1≤a≤n,n為詞向量的維度,bias(a)為第a個維度的偏差量,xa、ya、za分別表示3個詞向量第a個維度的特征值;
獲取不同維度的偏差量的偏差序列的中位數(shù)m;
利用公式計算出平均偏正量debias,其中VCentor(a)表示所述中心向量第a個維度的特征值;
利用公式Voffset(a)=(-1)n*debias得到所述偏正向量Voffset,其中Voffset(a)表示所述偏正向量第a個維度的特征值。
該專利技術(shù)資料僅供研究查看技術(shù)是否侵權(quán)等信息,商用須獲得專利權(quán)人授權(quán)。該專利全部權(quán)利屬于平安科技(深圳)有限公司,未經(jīng)平安科技(深圳)有限公司許可,擅自商用是侵權(quán)行為。如果您想購買此專利、獲得商業(yè)授權(quán)和技術(shù)合作,請聯(lián)系【客服】
本文鏈接:http://www.17sss.com.cn/pat/books/202011182212.8/1.html,轉(zhuǎn)載請聲明來源鉆瓜專利網(wǎng)。
- 根據(jù)用戶學(xué)習(xí)效果動態(tài)變化下載學(xué)習(xí)數(shù)據(jù)的系統(tǒng)及方法
- 用于智能個人化學(xué)習(xí)服務(wù)的方法
- 漸進(jìn)式學(xué)習(xí)管理方法及漸進(jìn)式學(xué)習(xí)系統(tǒng)
- 輔助學(xué)習(xí)的方法及裝置
- 基于人工智能的課程推薦方法、裝置、設(shè)備及存儲介質(zhì)
- 基于強(qiáng)化學(xué)習(xí)的自適應(yīng)移動學(xué)習(xí)路徑生成方法
- 一種線上視頻學(xué)習(xí)系統(tǒng)
- 一種基于校園大數(shù)據(jù)的自適應(yīng)學(xué)習(xí)方法、裝置及設(shè)備
- 一種學(xué)習(xí)方案推薦方法、裝置、設(shè)備和存儲介質(zhì)
- 游戲?qū)W習(xí)效果評測方法及系統(tǒng)





