本公開總體上涉及一種用于特別是從媒體流生成觸覺效果的方法和系統(tǒng)。
背景技術(shù):
1、電子設(shè)備向用戶提供觸覺反饋(諸如振動、質(zhì)地和熱量),通常被稱為觸覺反饋或觸覺效果。
2、因此,需要一種提供改進的觸覺效果的方法或系統(tǒng),從而增強用戶體驗。
技術(shù)實現(xiàn)思路
1、根據(jù)本公開的第一方面,提供了一種用于生成觸覺效果的方法。該方法可以包括:接收來自第一終端的第一媒體流;接收來自第二終端的第二媒體流,第二終端不同于第一終端;解碼第一媒體流以獲得可播放格式的第一內(nèi)容,和解碼第二媒體流以獲得可播放格式的第二內(nèi)容;將第一媒體流和第二媒體流分別與第一標識符和第二標識符相關(guān)聯(lián),第一標識符和/或第二標識符是一組預(yù)定標識符中的一個標識符;基于第一內(nèi)容和相關(guān)聯(lián)的第一標識符生成第一初始觸覺信號,和基于第二內(nèi)容和相關(guān)聯(lián)的第二標識符生成第二初始觸覺信號;處理第一內(nèi)容以生成對第一內(nèi)容的第一分析,和處理第二內(nèi)容以生成對第二內(nèi)容的第二分析;根據(jù)第一分析調(diào)制第一初始觸覺信號以輸出第一觸覺控制信號,和根據(jù)第二分析調(diào)制第二初始觸覺信號以輸出第二觸覺控制信號;以及根據(jù)第一觸覺控制信號和/或第二觸覺控制信號驅(qū)動致動器。
2、根據(jù)本公開的第二方面,提供了一種用于生成觸覺效果的系統(tǒng)。該系統(tǒng)可以包括:至少一個處理器和至少一個存儲器,該至少一個存儲器包括用于一個或多個程序的計算機程序代碼,至少一個存儲器和計算機程序代碼被配置為與至少一個處理器一起致使該系統(tǒng)至少:接收來自第一終端的第一媒體流;接收來自第二終端的第二媒體流,第二終端不同于第一終端;解碼第一媒體流以獲得可播放格式的第一內(nèi)容,和解碼第二媒體流以獲得可播放格式的第二內(nèi)容;
3、將第一媒體流和第二媒體流分別與第一標識符和第二標識符相關(guān)聯(lián),第一標識符和/或第二標識符是一組預(yù)定標識符中的一個標識符;基于第一內(nèi)容和相關(guān)聯(lián)的第一標識符生成第一初始觸覺信號,和基于第二內(nèi)容和相關(guān)聯(lián)的第二標識符生成第二初始觸覺信號;處理第一內(nèi)容以生成對第一內(nèi)容的第一分析,和處理第二內(nèi)容以生成對第二內(nèi)容的第二分析;根據(jù)第一分析調(diào)制第一初始觸覺信號以輸出第一觸覺控制信號,和根據(jù)第二分析調(diào)制第二初始觸覺信號以輸出第二觸覺控制信號;以及根據(jù)第一觸覺控制信號和/或第二觸覺控制信號驅(qū)動致動器。
4、根據(jù)本公開的第三方面,提供了一種用于生成觸覺效果的系統(tǒng)。該系統(tǒng)可以包括:接收器,其被配置為接收來自第一終端的第一媒體流和來自第二終端的第二媒體流,第二終端不同于第一終端;媒體處理模塊,其被配置為解碼第一媒體流以獲得可播放格式的第一內(nèi)容,和解碼第二媒體流以獲得可播放格式的第二內(nèi)容,并且被配置為將第一媒體流和第二媒體流分別與第一標識符和第二標識符相關(guān)聯(lián),第一標識符和/或第二標識符是一組預(yù)定標識符中的一個標識符;觸覺模塊,其被配置為基于第一內(nèi)容和相關(guān)聯(lián)的第一標識符生成第一初始觸覺信號,和基于第二內(nèi)容和相關(guān)聯(lián)的第二標識符生成第二初始觸覺信號;機器學(xué)習(xí)模塊,其被配置為通過機器學(xué)習(xí)模塊處理第一內(nèi)容以生成對第一內(nèi)容的第一分析,和處理第二內(nèi)容以生成對第二內(nèi)容的第二分析;觸覺驅(qū)動器,其被配置為根據(jù)第一分析調(diào)制第一初始觸覺信號以輸出第一觸覺控制信號,和根據(jù)第二分析調(diào)制第二初始觸覺信號以輸出第二觸覺控制信號;以及致動器,其被配置為根據(jù)第一觸覺控制信號和/或第二觸覺控制信號來被驅(qū)動。
5、根據(jù)本公開的第四方面,提供了一種用于生成觸覺效果的方法。該方法可以包括:接收多個媒體流,多個媒體流中的每個媒體流來自多個終端中的不同終端;解碼多個媒體流,以獲得可播放格式的多個內(nèi)容;將多個媒體流中的每個媒體流與對應(yīng)標識符相關(guān)聯(lián),對應(yīng)標識符選自一組預(yù)定標識符;基于多個內(nèi)容和相關(guān)聯(lián)的對應(yīng)標識符生成多個初始觸覺信號;處理多個內(nèi)容以生成多個分析;根據(jù)多個分析調(diào)制多個初始觸覺信號,以輸出多個觸覺控制信號;以及致動多個觸覺控制信號。
1.一種方法,包括:
2.如權(quán)利要求1所述的方法,其中,通過機器學(xué)習(xí)模塊處理所述第一內(nèi)容和所述第二內(nèi)容,所述機器學(xué)習(xí)模塊被配置為生成所述第一分析以便包括關(guān)于所述第一內(nèi)容是否包括不期望內(nèi)容的信息,并生成所述第二分析以便包括關(guān)于所述第二內(nèi)容是否包括不期望內(nèi)容的信息。
3.如權(quán)利要求2所述的方法,其中,所述機器學(xué)習(xí)模塊通過處理多個音頻配置文件來被訓(xùn)練,所述多個音頻配置文件包括游戲配置文件、語音配置文件和/或音樂配置文件。
4.如權(quán)利要求3所述的方法,其中,用于所述訓(xùn)練的準確度閾值被預(yù)先設(shè)定。
5.如權(quán)利要求1所述的方法,其中,生成第一初始觸覺信號和生成第二初始觸覺信號的步驟包括使用音頻轉(zhuǎn)觸覺算法生成所述第一初始觸覺信號和所述第二初始觸覺信號。
6.如權(quán)利要求5所述的方法,其中,根據(jù)與所述第一媒體流相關(guān)聯(lián)的所述第一標識符選擇第一音頻轉(zhuǎn)觸覺算法,并且根據(jù)與所述第二媒體流相關(guān)聯(lián)的所述第二標識符選擇第二音頻轉(zhuǎn)觸覺算法。
7.如權(quán)利要求1所述的方法,其中,該組預(yù)定標識符包括按頻率分類的標識符。
8.如權(quán)利要求1所述的方法,
9.如權(quán)利要求8所述的方法,其中,該組預(yù)定標識符包括語音、媒體流等,其中,所述預(yù)定義標識符是語音。
10.如權(quán)利要求8所述的方法,其中,所述第一分析包括第一另一標識符,并且所述第二分析包括第二另一標識符,所述第一另一標識符和/或所述第二另一標識符是另一組預(yù)定標識符中的一個標識符。
11.如權(quán)利要求10所述的方法,其中,如果所述第一內(nèi)容和/或所述第二內(nèi)容不與所述預(yù)定義標識符相關(guān)聯(lián),并且如果所述第一分析包括是所述預(yù)定義標識符的所述第一另一標識符和/或所述第二分析包括是所述預(yù)定義標識符的所述第二另一標識符,則調(diào)制所述第一初始觸覺信號和調(diào)制所述第二初始觸覺信號的步驟包括調(diào)制所述第一初始觸覺信號以輸出具有所述觸覺減弱指示的所述第一觸覺控制信號,和/或調(diào)制所述第二初始觸覺信號以輸出具有所述觸覺減弱指示的所述第二觸覺控制信號。
12.如權(quán)利要求10所述的方法,其中,如果所述第一分析不包括是所述預(yù)定義標識符的所述第一另一標識符和/或所述第二分析不包括是所述預(yù)定義標識符的所述第二另一標識符,則調(diào)制所述第一初始觸覺信號和調(diào)制所述第二初始觸覺信號的步驟包括調(diào)制所述第一初始觸覺信號以輸出具有觸覺模式的所述第一觸覺控制信號,和/或調(diào)制所述第二初始觸覺信號以輸出具有觸覺模式的所述第二觸覺控制信號。
13.如權(quán)利要求1所述的方法,其中,所述第一媒體流和所述第二媒體流同時發(fā)生。
14.如權(quán)利要求13所述的方法,進一步包括:
15.如權(quán)利要求1所述的方法,在驅(qū)動致動器的步驟之前,所述方法進一步包括:
16.一種系統(tǒng),包括至少一個處理器和至少一個存儲器,所述至少一個存儲器包括用于一個或多個程序的計算機程序代碼,所述至少一個存儲器和所述計算機程序代碼被配置為與所述至少一個處理器一起致使所述系統(tǒng)至少:
17.一種系統(tǒng),包括:
18.如權(quán)利要求17所述的系統(tǒng),其中,所述機器學(xué)習(xí)模塊被配置為生成所述第一分析以便包括關(guān)于所述第一內(nèi)容是否包括不期望內(nèi)容的信息,并生成所述第二分析以便包括關(guān)于所述第二內(nèi)容是否包括不期望內(nèi)容的信息。
19.如權(quán)利要求18所述的系統(tǒng),其中,所述機器學(xué)習(xí)模塊通過處理多個音頻配置文件來被訓(xùn)練,所述多個音頻配置文件包括游戲配置文件、語音配置文件和/或音樂配置文件。
20.如權(quán)利要求19所述的系統(tǒng),其中,用于所述訓(xùn)練的準確度閾值被預(yù)先設(shè)定。
21.如權(quán)利要求17所述的系統(tǒng),其中,所述觸覺模塊被配置為使得生成第一初始觸覺信號和生成第二初始觸覺信號包括使用音頻轉(zhuǎn)觸覺算法生成所述第一初始觸覺信號和所述第二初始觸覺信號。
22.如權(quán)利要求21所述的系統(tǒng),其中,根據(jù)與所述第一媒體流相關(guān)聯(lián)的所述第一標識符選擇第一音頻轉(zhuǎn)觸覺算法,并且根據(jù)與所述第二媒體流相關(guān)聯(lián)的所述第二標識符選擇第二音頻轉(zhuǎn)觸覺算法。
23.如權(quán)利要求17所述的系統(tǒng),其中,該組預(yù)定標識符包括按頻率分類的標識符。
24.如權(quán)利要求17所述的系統(tǒng),
25.如權(quán)利要求24所述的系統(tǒng),其中,該組預(yù)定標識符包括語音、媒體流等,其中,所述預(yù)定義對應(yīng)標識符是語音。
26.如權(quán)利要求24所述的系統(tǒng),其中,所述第一分析包括第一另一標識符,并且所述第二分析包括第二另一標識符,所述第一另一標識符或所述第二另一標識符是另一組預(yù)定標識符中的一個標識符。
27.如權(quán)利要求26所述的系統(tǒng),其中,如果所述第一內(nèi)容和/或所述第二內(nèi)容不與所述預(yù)定義標識符相關(guān)聯(lián),并且如果所述第一分析包括是所述預(yù)定義標識符的所述第一另一標識符和/或所述第二分析包括是所述預(yù)定義標識符的所述第二另一標識符,則調(diào)制所述第一初始觸覺信號和調(diào)制所述第二初始觸覺信號的步驟包括調(diào)制所述第一初始觸覺信號以輸出具有所述觸覺減弱指示的所述第一觸覺控制信號,和/或調(diào)制所述第二初始觸覺信號以輸出具有所述觸覺減弱指示的所述第二觸覺控制信號。
28.如權(quán)利要求26所述的系統(tǒng),其中,如果所述第一分析不包括是所述預(yù)定義標識符的所述第一另一標識符和/或所述第二分析不包括是所述預(yù)定義標識符的所述第二另一標識符,則調(diào)制所述第一初始觸覺信號和調(diào)制所述第二初始觸覺信號的步驟包括調(diào)制所述第一初始觸覺信號以輸出具有觸覺模式的所述第一觸覺控制信號,和/或調(diào)制所述第二初始觸覺信號以輸出具有觸覺模式的所述第二觸覺控制信號。
29.如權(quán)利要求17所述的系統(tǒng),其中,所述接收器被配置為:
30.如權(quán)利要求17所述的系統(tǒng),其中,所述系統(tǒng)是無線耳機,所述無線耳機被配置為接收同時發(fā)生的所述第一媒體流和所述第二媒體流。
31.如權(quán)利要求17所述的系統(tǒng),進一步包括:
32.一種方法,包括:
33.一種計算機程序,包括致使如權(quán)利要求17所述的系統(tǒng)執(zhí)行如權(quán)利要求1所述的方法的步驟的指令。
34.一種計算機可讀介質(zhì),其上存儲有如權(quán)利要求33所述的計算機程序。