本發(fā)明涉及智慧問(wèn)答,特別涉及一種基于語(yǔ)義識(shí)別的智能陪伴系統(tǒng)及方法。
背景技術(shù):
1、在養(yǎng)老社區(qū)場(chǎng)景評(píng)估與應(yīng)對(duì)老年人情緒狀態(tài)和心理需求方面,如孤獨(dú)、焦慮、抑郁等情緒傾向,傳統(tǒng)方法主要依賴于人工心理探訪交流。這一過(guò)程中,工作人員需親自上門與老人進(jìn)行面對(duì)面的溝通,隨后人工登記交流內(nèi)容,再由專業(yè)心理醫(yī)生進(jìn)行詳細(xì)分析,并據(jù)此進(jìn)行人工疏導(dǎo)。然而,這種方法在實(shí)際操作中面臨著諸多挑戰(zhàn)。首先,由于養(yǎng)老社區(qū)中老人數(shù)量眾多,人工探訪的工作量極為龐大,導(dǎo)致每位老人能夠獲得的關(guān)注與交流頻次有限。其次,人工登記交流內(nèi)容不僅耗時(shí)費(fèi)力,還容易因?yàn)橹饔^因素或記錄不全而影響后續(xù)分析的準(zhǔn)確性。再者,專業(yè)心理醫(yī)生資源的稀缺性也限制了分析與疏導(dǎo)的深度與廣度,使得許多老人的心理需求無(wú)法得到及時(shí)且有效的滿足。
2、更重要的是,由于交流頻次和交流內(nèi)容的記錄有限,傳統(tǒng)方法往往難以全面捕捉老人的情緒變化與心理需求,從而無(wú)法達(dá)到預(yù)期的疏導(dǎo)效果。因此,探索更加高效、精準(zhǔn)且個(gè)性化的心理評(píng)估與疏導(dǎo)方法,已成為當(dāng)前養(yǎng)老社區(qū)服務(wù)中亟待解決的問(wèn)題。
3、鑒于此,需要一種基于語(yǔ)義識(shí)別的智能陪伴系統(tǒng)及方法。
技術(shù)實(shí)現(xiàn)思路
1、針對(duì)現(xiàn)有技術(shù)中傳統(tǒng)方法往往難以全面捕捉老人的情緒變化與心理需求,從而無(wú)法達(dá)到預(yù)期的疏導(dǎo)效果的問(wèn)題,本發(fā)明提供了一種基于語(yǔ)義識(shí)別的智能陪伴系統(tǒng)及方法,能夠在采集并標(biāo)注用戶數(shù)據(jù)之后,訓(xùn)練情感化模型以進(jìn)行用戶情緒識(shí)別,并且基于用戶情緒啟動(dòng)預(yù)先設(shè)定好的策略,采用預(yù)先設(shè)定好的話術(shù)進(jìn)行語(yǔ)音輸出。具體技術(shù)方案如下:
2、一種基于語(yǔ)義識(shí)別的智能陪伴系統(tǒng),包括:
3、語(yǔ)音采集單元,用于采集用戶交互過(guò)程中輸入的語(yǔ)音信號(hào);
4、文本識(shí)別單元,與語(yǔ)音采集單元連接,用于將語(yǔ)音信號(hào)轉(zhuǎn)化為文本的形式存儲(chǔ);
5、情緒識(shí)別單元與文本識(shí)別單元連接,用于在采集并標(biāo)注用戶數(shù)據(jù)之后,訓(xùn)練情感化模型以進(jìn)行用戶情緒識(shí)別;
6、策略生成單元,基于預(yù)先設(shè)定好的情感支持策略,選用預(yù)先設(shè)定好的話術(shù)進(jìn)行語(yǔ)音輸出。此外,策略生成單元還與情緒識(shí)別單元連接,還基于用戶情緒啟動(dòng)預(yù)先設(shè)定好的策略,采用預(yù)先設(shè)定好的話術(shù)進(jìn)行語(yǔ)音輸出。
7、優(yōu)選的,情緒識(shí)別單元的具體操作如下:
8、對(duì)語(yǔ)音數(shù)據(jù)轉(zhuǎn)寫后的文本進(jìn)行情感標(biāo)注,為模型訓(xùn)練提供必要的監(jiān)督信息;
9、對(duì)語(yǔ)音轉(zhuǎn)寫后的文本和情感標(biāo)注結(jié)果進(jìn)行大數(shù)據(jù)存儲(chǔ)以備ai訓(xùn)練分析;
10、根據(jù)具體應(yīng)用場(chǎng)景選擇合適的模型架構(gòu),如transformer、rnn等;
11、設(shè)計(jì)網(wǎng)絡(luò)結(jié)構(gòu),包括輸入層、編碼層、解碼層等,以實(shí)現(xiàn)語(yǔ)音到文本的轉(zhuǎn)換;
12、設(shè)置模型參數(shù),包括層數(shù)、隱藏單元數(shù)、學(xué)習(xí)率,以優(yōu)化模型性能;
13、采用adam優(yōu)化算法對(duì)訓(xùn)練模型。
14、優(yōu)選的,情感支持策略包括個(gè)性化問(wèn)候、天氣提醒、節(jié)日祝福、共情回應(yīng)、緊急呼叫。
15、優(yōu)選的,通過(guò)定義規(guī)則集進(jìn)行情感支持策略的選擇,定義規(guī)則集的過(guò)程具體如下:
16、固定時(shí)間觸發(fā):設(shè)定每日、每周或每月定時(shí)提醒;
17、情境感知:根據(jù)環(huán)境傳感器提供的信息來(lái)判斷是否需要啟動(dòng)某項(xiàng)策略;
18、用戶輸入響應(yīng):當(dāng)用戶表達(dá)特定關(guān)鍵詞或檢測(cè)出特定情緒時(shí),立即觸發(fā)相關(guān)策略。
19、優(yōu)選的,還包括聲音復(fù)刻單元,所述聲音復(fù)刻單元采用阿里云cosyvoice的聲音復(fù)刻技術(shù),模擬用戶親人的聲音進(jìn)行用戶交互過(guò)程中的語(yǔ)音輸出。
20、優(yōu)選的,還包括興趣識(shí)別及推薦單元,所述興趣識(shí)別及推薦單元基于自然語(yǔ)言處理模型,識(shí)別出用戶喜歡的話題、活動(dòng)類型以及潛在的新興領(lǐng)域,并且推薦相關(guān)內(nèi)容。
21、優(yōu)選的,興趣識(shí)別的過(guò)程具體如下:
22、使用bert作為預(yù)訓(xùn)練模型,并根據(jù)根據(jù)老年人交流的特點(diǎn)和需求,對(duì)預(yù)訓(xùn)練模型進(jìn)行微調(diào),微調(diào)包括加入特定于老年人生活的健康護(hù)理及家庭生活語(yǔ)料庫(kù);
23、利用命名實(shí)體識(shí)別技術(shù),從對(duì)話中自動(dòng)抽取人名、地點(diǎn)、時(shí)間等實(shí)體信息;同時(shí)結(jié)合詞頻統(tǒng)計(jì)方法,找出高頻詞匯作為可能的興趣標(biāo)識(shí);
24、通過(guò)latent?dirichlet?allocation將大量的對(duì)話文本聚類成若干個(gè)主題域,從而發(fā)現(xiàn)用戶反復(fù)提及的主題或話題;
25、借助深度學(xué)習(xí)的情感分類器,評(píng)估每次對(duì)話中的情緒傾向,幫助判斷哪些話題能讓用戶感到愉快或引起共鳴;
26、對(duì)于每個(gè)識(shí)別出的主題或活動(dòng)類型,為其分配一個(gè)或多個(gè)標(biāo)簽,便于后續(xù)管理和檢索;
27、通過(guò)關(guān)聯(lián)規(guī)則挖掘或其他推薦算法,探索不同興趣之間的內(nèi)在聯(lián)系,預(yù)測(cè)用戶尚未意識(shí)到但可能感興趣的新領(lǐng)域。
28、一種基于語(yǔ)義識(shí)別的智能陪伴方法,應(yīng)用于如上所述的系統(tǒng),包括以下步驟:
29、采集用戶交互過(guò)程中輸入的語(yǔ)音信號(hào)并進(jìn)行數(shù)據(jù)清洗,所述語(yǔ)音信號(hào)包括不同口音、語(yǔ)速、語(yǔ)調(diào)的語(yǔ)音樣本;
30、基于paraformer語(yǔ)音識(shí)別,將采集到的語(yǔ)音樣本轉(zhuǎn)化為文本的形式;
31、構(gòu)建情感化模型并基于情感化模型進(jìn)行用戶情緒識(shí)別;
32、設(shè)定情感支持策略以及語(yǔ)音輸出話術(shù),實(shí)時(shí)采集時(shí)間、環(huán)境數(shù)據(jù)以及用戶情緒,啟動(dòng)相應(yīng)的情感支持策略及語(yǔ)音輸出話術(shù);
33、采用阿里云cosyvoice的聲音復(fù)刻技術(shù),模擬用戶親人的聲音進(jìn)行用戶交互過(guò)程中的語(yǔ)音輸出;
34、基于自然語(yǔ)言處理模型,識(shí)別出用戶喜歡的話題、活動(dòng)類型以及潛在的新興領(lǐng)域,并且推薦相關(guān)內(nèi)容。
35、一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì),所述計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)包括存儲(chǔ)的程序,其中,在所述程序運(yùn)行時(shí)控制所述計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)所在設(shè)備如上所述的基于語(yǔ)義識(shí)別的智能陪伴方法。
36、一種處理器,所述處理器用于運(yùn)行程序,其中,所述程序運(yùn)行時(shí)執(zhí)行如上所述的基于語(yǔ)義識(shí)別的智能陪伴方法。
37、與現(xiàn)有技術(shù)相比,本發(fā)明的有益效果為:
38、本發(fā)明基于paraformer語(yǔ)音識(shí)別,將采集到的語(yǔ)音樣本轉(zhuǎn)化為文本的形式;構(gòu)建情感化模型并基于情感化模型進(jìn)行用戶情緒識(shí)別;設(shè)定情感支持策略以及語(yǔ)音輸出話術(shù),實(shí)時(shí)采集時(shí)間、環(huán)境數(shù)據(jù)以及用戶情緒,啟動(dòng)相應(yīng)的情感支持策略及語(yǔ)音輸出話術(shù);采用阿里云cosyvoice的聲音復(fù)刻技術(shù),模擬用戶親人的聲音進(jìn)行用戶交互過(guò)程中的語(yǔ)音輸出;基于自然語(yǔ)言處理模型,識(shí)別出用戶喜歡的話題、活動(dòng)類型以及潛在的新興領(lǐng)域,并且推薦相關(guān)內(nèi)容??傊?,本發(fā)明在情感層面上給予了老人前所未有的關(guān)懷與支持,讓養(yǎng)老社區(qū)的每一位老人都能感受到科技帶來(lái)的溫暖與陪伴。
1.一種基于語(yǔ)義識(shí)別的智能陪伴系統(tǒng),其特征在于,包括:
2.根據(jù)權(quán)利要求1所述的一種基于語(yǔ)義識(shí)別的智能陪伴系統(tǒng),其特征在于,情緒識(shí)別單元的具體操作如下:
3.根據(jù)權(quán)利要求1所述的一種基于語(yǔ)義識(shí)別的智能陪伴系統(tǒng),其特征在于,情感支持策略包括個(gè)性化問(wèn)候、天氣提醒、節(jié)日祝福、共情回應(yīng)、緊急呼叫。
4.根據(jù)權(quán)利要求1所述的一種基于語(yǔ)義識(shí)別的智能陪伴系統(tǒng),其特征在于,通過(guò)定義規(guī)則集進(jìn)行情感支持策略的選擇,定義規(guī)則集的過(guò)程具體如下:
5.根據(jù)權(quán)利要求1所述的一種基于語(yǔ)義識(shí)別的智能陪伴系統(tǒng),其特征在于,還包括聲音復(fù)刻單元,所述聲音復(fù)刻單元采用阿里云cosyvoice的聲音復(fù)刻技術(shù),模擬用戶親人的聲音進(jìn)行用戶交互過(guò)程中的語(yǔ)音輸出。
6.根據(jù)權(quán)利要求1所述的一種基于語(yǔ)義識(shí)別的智能陪伴系統(tǒng),其特征在于,還包括興趣識(shí)別及推薦單元,所述興趣識(shí)別及推薦單元基于自然語(yǔ)言處理模型,識(shí)別出用戶喜歡的話題、活動(dòng)類型以及潛在的新興領(lǐng)域,并且推薦相關(guān)內(nèi)容。
7.根據(jù)權(quán)利要求6所述的一種基于語(yǔ)義識(shí)別的智能陪伴系統(tǒng),其特征在于,興趣識(shí)別的過(guò)程具體如下:
8.一種基于語(yǔ)義識(shí)別的智能陪伴方法,其特征在于,應(yīng)用于權(quán)利要求1至7任一所述的系統(tǒng),包括以下步驟:
9.一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì),其特征在于,所述計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)包括存儲(chǔ)的程序,其中,在所述程序運(yùn)行時(shí)控制所述計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)所在設(shè)備執(zhí)行權(quán)利要求8中所述的基于語(yǔ)義識(shí)別的智能陪伴方法。
10.一種處理器,其特征在于,所述處理器用于運(yùn)行程序,其中,所述程序運(yùn)行時(shí)執(zhí)行權(quán)利要求8中所述的基于語(yǔ)義識(shí)別的智能陪伴方法。