[發(fā)明專利]言語功能障礙檢測方法、裝置、設(shè)備、存儲介質(zhì)及系統(tǒng)在審
| 申請?zhí)枺?/td> | 202011582090.1 | 申請日: | 2020-12-28 |
| 公開(公告)號: | CN112617755A | 公開(公告)日: | 2021-04-09 |
| 發(fā)明(設(shè)計)人: | 馬永;馬賽;楊建東;王成興 | 申請(專利權(quán))人: | 深圳市艾利特醫(yī)療科技有限公司 |
| 主分類號: | A61B5/00 | 分類號: | A61B5/00 |
| 代理公司: | 深圳市蘭鋒盛世知識產(chǎn)權(quán)代理有限公司 44504 | 代理人: | 羅炳鋒 |
| 地址: | 518000 廣東省深圳市光明區(qū)馬田街道馬山頭社區(qū)*** | 國省代碼: | 廣東;44 |
| 權(quán)利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關(guān)鍵詞: | 言語 功能障礙 檢測 方法 裝置 設(shè)備 存儲 介質(zhì) 系統(tǒng) | ||
1.一種言語功能障礙檢測方法,其特征在于,包括:
獲取用戶在言語功能障礙檢測語句下的應(yīng)答音頻信號以及口型變換視頻;
根據(jù)預(yù)設(shè)的音頻特征提取模型對所述應(yīng)答音頻信號進行處理生成應(yīng)答音頻特征信息;
根據(jù)預(yù)設(shè)的視頻特征提取模型對所述口型變換視頻進行處理生成口型變換特征信息;
根據(jù)預(yù)設(shè)的言語功能障礙音頻檢測模型對所述應(yīng)答音頻特征信息進行處理,生成言語功能障礙音頻檢測結(jié)果;所述言語功能障礙音頻檢測模型是預(yù)先基于循環(huán)神經(jīng)網(wǎng)絡(luò)模型算法訓(xùn)練生成的;
根據(jù)預(yù)設(shè)的言語功能障礙圖像檢測模型對所述口型變換特征信息進行處理,生成言語功能障礙視頻檢測結(jié)果;所述言語功能障礙圖像檢測模型是預(yù)先基于卷積神經(jīng)網(wǎng)絡(luò)模型算法訓(xùn)練生成的;
根據(jù)所述言語功能障礙音頻檢測結(jié)果以及所述言語功能障礙視頻檢測結(jié)果確定言語功能障礙檢測結(jié)果。
2.根據(jù)權(quán)利要求1所述的言語功能障礙檢測方法,其特征在于,所述根據(jù)預(yù)設(shè)的音頻特征提取模型對所述應(yīng)答音頻信號進行處理生成應(yīng)答音頻特征信息的步驟,具體包括:
根據(jù)小波變換對所述應(yīng)答音頻信號進行降噪處理,生成降噪處理后的應(yīng)答音頻信號;
確定所述應(yīng)答音頻信號的言語功能障礙音頻檢測關(guān)鍵信息;所述言語功能障礙音頻檢測關(guān)鍵信息至少包括音頻持續(xù)時長、頻率變化信息以及幅度變化信息;
按照預(yù)設(shè)的采樣規(guī)則對所述應(yīng)答音頻信號進行采樣,確定多個采樣點的序列;
根據(jù)所述言語功能障礙音頻檢測關(guān)鍵信息以及所述多個采樣點的序列確定應(yīng)答音頻特征信息。
3.根據(jù)權(quán)利要求1所述的言語功能障礙檢測方法,其特征在于,所述根據(jù)預(yù)設(shè)的視頻特征提取模型對所述口型變換視頻進行處理生成口型變換特征信息的步驟,具體包括:
根據(jù)預(yù)設(shè)的分幀規(guī)則對所述口型變換視頻進行分幀處理生成多張口型變換圖像;
根據(jù)時間序列并按照預(yù)設(shè)的排序規(guī)則將所述多張口型變換圖像排序生成口型變換排序圖像,所述口型變換排序圖像即為口型變換特征信息。
4.根據(jù)權(quán)利要求1所述的言語功能障礙檢測方法,其特征在于,在所述根據(jù)所述言語功能障礙音頻檢測結(jié)果以及所述言語功能障礙視頻檢測結(jié)果確定言語功能障礙檢測結(jié)果的步驟之前,還包括:
獲取用戶在言語功能障礙檢測語句下的聲帶振動信號;
根據(jù)預(yù)設(shè)的聲帶振動特征提取模型對所述聲帶振動信號進行處理生成聲帶振動特征信息;
根據(jù)預(yù)設(shè)的言語功能障礙振動檢測模型對所述聲帶振動特征信息進行處理,生成言語功能障礙振動檢測結(jié)果;所述言語功能障礙振動檢測模型是預(yù)先基于循環(huán)神經(jīng)網(wǎng)絡(luò)模型算法訓(xùn)練生成的;
所述根據(jù)所述言語功能障礙音頻檢測結(jié)果以及所述言語功能障礙視頻檢測結(jié)果確定言語功能障礙檢測結(jié)果的步驟,具體為:
根據(jù)所述言語功能障礙音頻檢測結(jié)果、所述言語功能障礙視頻檢測結(jié)果以及所述言語功能障礙振動檢測結(jié)果確定言語功能障礙檢測結(jié)果。
5.根據(jù)權(quán)利要求1所述的言語功能障礙檢測方法,其特征在于,在所述根據(jù)所述言語功能障礙音頻檢測結(jié)果以及所述言語功能障礙視頻檢測結(jié)果確定言語功能障礙檢測結(jié)果的步驟之前,還包括:
獲取用戶在言語功能障礙檢測語句下的應(yīng)答文本信息;
根據(jù)預(yù)設(shè)的語義分析模型對所述應(yīng)答文本信息進行語義分析,生成應(yīng)答文本語義分析結(jié)果;所述語義分析模型是預(yù)先基于自然語言處理算法訓(xùn)練生成的;
所述根據(jù)所述言語功能障礙音頻檢測結(jié)果以及所述言語功能障礙視頻檢測結(jié)果確定言語功能障礙檢測結(jié)果的步驟,具體為:
根據(jù)所述言語功能障礙音頻檢測結(jié)果、所述言語功能障礙視頻檢測結(jié)果以及所述應(yīng)答文本語義分析結(jié)果確定言語功能障礙檢測結(jié)果。
6.根據(jù)權(quán)利要求1所述的言語功能障礙檢測方法,其特征在于,在預(yù)先基于循環(huán)神經(jīng)網(wǎng)絡(luò)模型算法訓(xùn)練生成所述言語功能障礙音頻檢測模型的過程中,還包括:
確定應(yīng)答音頻特征樣本信息;
對所述應(yīng)答音頻特征樣本信息按照預(yù)設(shè)的變換規(guī)則進行頻率變換;
輸出變換后的應(yīng)答音頻特征樣本信息并確定言語功能障礙音頻檢測響應(yīng)結(jié)果。
該專利技術(shù)資料僅供研究查看技術(shù)是否侵權(quán)等信息,商用須獲得專利權(quán)人授權(quán)。該專利全部權(quán)利屬于深圳市艾利特醫(yī)療科技有限公司,未經(jīng)深圳市艾利特醫(yī)療科技有限公司許可,擅自商用是侵權(quán)行為。如果您想購買此專利、獲得商業(yè)授權(quán)和技術(shù)合作,請聯(lián)系【客服】
本文鏈接:http://www.17sss.com.cn/pat/books/202011582090.1/1.html,轉(zhuǎn)載請聲明來源鉆瓜專利網(wǎng)。
- 同類專利
- 專利分類





