本發(fā)明適用于計(jì)算機(jī)技術(shù)領(lǐng)域，提供了一種言語(yǔ)功能障礙檢測(cè)方法、裝置、設(shè)備、存儲(chǔ)介質(zhì)及系統(tǒng)，所述方法包括：獲取應(yīng)答音頻信號(hào)以及口型變換視頻；對(duì)所述應(yīng)答音頻信號(hào)與口型變換視頻進(jìn)行特征提??；根據(jù)言語(yǔ)功能障礙音頻檢測(cè)模型以及言語(yǔ)功能障礙圖像檢測(cè)模型分別對(duì)特征提取的應(yīng)答音頻信號(hào)以及口型變換視頻進(jìn)行處理，得到言語(yǔ)功能障礙音頻檢測(cè)結(jié)果與言語(yǔ)功能障礙視頻檢測(cè)結(jié)果，并進(jìn)一步確定言語(yǔ)功能障礙檢測(cè)結(jié)果。本發(fā)明提供的言語(yǔ)功能障礙檢測(cè)方法利用人工智能檢測(cè)取代人工檢測(cè)，解決了現(xiàn)有言語(yǔ)功能障礙檢測(cè)方法依賴(lài)于人工參與的問(wèn)題，并且采用兩種規(guī)則分別從應(yīng)答音頻與口型變換的角度對(duì)言語(yǔ)功能障礙進(jìn)行檢測(cè)，并綜合判斷，實(shí)際檢測(cè)效果準(zhǔn)確率高。

技術(shù)領(lǐng)域

本發(fā)明屬于計(jì)算機(jī)技術(shù)領(lǐng)域，尤其涉及一種言語(yǔ)功能障礙檢測(cè)方法、裝置、設(shè)備、存儲(chǔ)介質(zhì)及系統(tǒng)。

背景技術(shù)

言語(yǔ)功能障礙通常是指人體在說(shuō)話或表達(dá)方面出現(xiàn)一定程度的問(wèn)題，通常情況下是基于不同的腦部病理原因?qū)е碌?，主要包括失語(yǔ)癥、構(gòu)語(yǔ)困難、言語(yǔ)困難、口吃等癥狀。

現(xiàn)有的大所述言語(yǔ)功能障礙通常都是患者與醫(yī)生對(duì)話，醫(yī)生根據(jù)與患者的溝通情況確定患者可能存在的言語(yǔ)功能障礙，在必要的時(shí)候還需要結(jié)合腦部CT所表征出的病理。然而，這樣的言語(yǔ)功能障礙檢測(cè)需要依賴(lài)于醫(yī)生的經(jīng)驗(yàn)，此外，大部分言語(yǔ)功能障礙患者通常都具有自閉傾向，面對(duì)面與人溝通時(shí)往往會(huì)存在不同的表現(xiàn)，這也側(cè)面加重了醫(yī)生判斷的難度，導(dǎo)致言語(yǔ)功能障礙檢測(cè)效率低，效果差。

可見(jiàn)，現(xiàn)有的言語(yǔ)功能障礙檢測(cè)方法大所述都是基于人工判斷的，容易受到外界因素的干擾，導(dǎo)致言語(yǔ)功能障礙檢測(cè)效率低，效果差。

發(fā)明內(nèi)容

本發(fā)明實(shí)施例的目的在于提供一種言語(yǔ)功能障礙檢測(cè)方法，旨在解決現(xiàn)有的言語(yǔ)功能障礙檢測(cè)方法所存在的容易受到外界因素的干擾，導(dǎo)致言語(yǔ)功能障礙檢測(cè)效率低，效果差的技術(shù)問(wèn)題。

本發(fā)明實(shí)施例是這樣實(shí)現(xiàn)的，一種言語(yǔ)功能障礙檢測(cè)方法，包括：

獲取用戶在言語(yǔ)功能障礙檢測(cè)語(yǔ)句下的應(yīng)答音頻信號(hào)以及口型變換視頻；

根據(jù)預(yù)設(shè)的音頻特征提取模型對(duì)所述應(yīng)答音頻信號(hào)進(jìn)行處理生成應(yīng)答音頻特征信息；

根據(jù)預(yù)設(shè)的視頻特征提取模型對(duì)所述口型變換視頻進(jìn)行處理生成口型變換特征信息；

根據(jù)預(yù)設(shè)的言語(yǔ)功能障礙音頻檢測(cè)模型對(duì)所述應(yīng)答音頻特征信息進(jìn)行處理，生成言語(yǔ)功能障礙音頻檢測(cè)結(jié)果；所述言語(yǔ)功能障礙音頻檢測(cè)模型是預(yù)先基于循環(huán)神經(jīng)網(wǎng)絡(luò)模型算法訓(xùn)練生成的；

根據(jù)預(yù)設(shè)的言語(yǔ)功能障礙圖像檢測(cè)模型對(duì)所述口型變換特征信息進(jìn)行處理，生成言語(yǔ)功能障礙視頻檢測(cè)結(jié)果；所述言語(yǔ)功能障礙圖像檢測(cè)模型是預(yù)先基于卷積神經(jīng)網(wǎng)絡(luò)模型算法訓(xùn)練生成的；

根據(jù)所述言語(yǔ)功能障礙音頻檢測(cè)結(jié)果以及所述言語(yǔ)功能障礙視頻檢測(cè)結(jié)果確定言語(yǔ)功能障礙檢測(cè)結(jié)果。

本發(fā)明實(shí)施例的另一目的在于提供一種言語(yǔ)功能障礙檢測(cè)裝置，包括

言語(yǔ)功能障礙檢測(cè)信息獲取單元，用于獲取用戶在言語(yǔ)功能障礙檢測(cè)語(yǔ)句下的應(yīng)答音頻信號(hào)以及口型變換視頻；

音頻特征提取單元，用于根據(jù)預(yù)設(shè)的音頻特征提取模型對(duì)所述應(yīng)答音頻信號(hào)進(jìn)行處理生成應(yīng)答音頻特征信息；

視頻特征提取單元，用于根據(jù)預(yù)設(shè)的視頻特征提取模型對(duì)所述口型變換視頻進(jìn)行處理生成口型變換特征信息；

音頻檢測(cè)結(jié)果確定單元，用于根據(jù)預(yù)設(shè)的言語(yǔ)功能障礙音頻檢測(cè)模型對(duì)所述應(yīng)答音頻特征信息進(jìn)行處理，生成言語(yǔ)功能障礙音頻檢測(cè)結(jié)果；所述言語(yǔ)功能障礙音頻檢測(cè)模型是預(yù)先基于循環(huán)神經(jīng)網(wǎng)絡(luò)模型算法訓(xùn)練生成的；

視頻檢測(cè)結(jié)果確定單元，用于根據(jù)預(yù)設(shè)的言語(yǔ)功能障礙圖像檢測(cè)模型對(duì)所述口型變換特征信息進(jìn)行處理，生成言語(yǔ)功能障礙視頻檢測(cè)結(jié)果；所述言語(yǔ)功能障礙圖像檢測(cè)模型是預(yù)先基于卷積神經(jīng)網(wǎng)絡(luò)模型算法訓(xùn)練生成的；