本發(fā)明涉及語音識別技術(shù)領(lǐng)域，尤其涉及一種標(biāo)點添加方法及裝置。

背景技術(shù)：

在當(dāng)前的語音識別過程中，大多是當(dāng)語音識別時，中間有停頓的地方識別為逗號，結(jié)束時自動添加句號，整個句子都被視為陳述語氣，這種方式在某些情形下并不能正確傳達(dá)出講話者語義和情感。

技術(shù)實現(xiàn)要素：

本發(fā)明實施例提供一種標(biāo)點添加方法及裝置，用以實現(xiàn)簡單方便地實現(xiàn)標(biāo)點符號的自動添加，并提高標(biāo)點符號添加的準(zhǔn)確性和靈活性。

根據(jù)本發(fā)明實施例的第一方面，提供一種標(biāo)點添加方法，包括：

獲取包含標(biāo)點的預(yù)設(shè)訓(xùn)練語料信息；

利用所述預(yù)設(shè)訓(xùn)練語料信息和預(yù)設(shè)的網(wǎng)絡(luò)模型結(jié)構(gòu)進(jìn)行訓(xùn)練，得到標(biāo)點添加模型，其中，所述預(yù)設(shè)的網(wǎng)絡(luò)模型結(jié)構(gòu)包括編碼器結(jié)構(gòu)和解碼器結(jié)構(gòu)；

接收用戶輸入的語音數(shù)據(jù)信息；

對所述語音數(shù)據(jù)信息進(jìn)行識別，得到所述語音數(shù)據(jù)信息對應(yīng)的文本信息和停頓信息；

根據(jù)所述文本信息、所述停頓信息和所述標(biāo)點添加模型，確定所述文本信息對應(yīng)的標(biāo)點信息。

在該實施例中，根據(jù)預(yù)設(shè)訓(xùn)練語料和預(yù)設(shè)的網(wǎng)絡(luò)模型結(jié)構(gòu)進(jìn)行訓(xùn)練，得到包含編碼器結(jié)構(gòu)和解碼器結(jié)構(gòu)的標(biāo)點添加模型，通過該標(biāo)點添加模型為接收到的語音數(shù)據(jù)信息添加標(biāo)點。這樣，可以實現(xiàn)簡單方便地實現(xiàn)標(biāo)點符號的自動添加，并提高標(biāo)點符號添加的準(zhǔn)確性和靈活性。

在一個實施例中，所述編碼器結(jié)構(gòu)包括第一LSTM隱藏層，所述解碼器結(jié)構(gòu)包括第二LSTM隱藏層。

在一個實施例中，所述利用所述預(yù)設(shè)訓(xùn)練語料信息和預(yù)設(shè)的網(wǎng)絡(luò)模型結(jié)構(gòu)進(jìn)行訓(xùn)練，得到標(biāo)點添加模型，包括：

確定所述預(yù)設(shè)訓(xùn)練語料信息對應(yīng)的語料文本信息、語料停頓信息和語料標(biāo)點信息；

將所述語料文本信息和所述語料停頓信息確定為所述預(yù)設(shè)的網(wǎng)絡(luò)模型結(jié)構(gòu)的輸入向量，將所述語料標(biāo)點信息確定為所述預(yù)設(shè)的網(wǎng)絡(luò)模型結(jié)構(gòu)的輸出向量，計算所述預(yù)設(shè)網(wǎng)絡(luò)模型結(jié)構(gòu)對應(yīng)的目標(biāo)模型參數(shù)；

根據(jù)所述目標(biāo)模型參數(shù)和所述預(yù)設(shè)的網(wǎng)絡(luò)模型結(jié)構(gòu)確定所述標(biāo)點添加模型。

在一個實施例中，所述將所述語料文本信息和所述語料停頓信息確定為所述預(yù)設(shè)的網(wǎng)絡(luò)模型結(jié)構(gòu)的輸入向量，將所述語料標(biāo)點信息確定為所述預(yù)設(shè)的網(wǎng)絡(luò)模型結(jié)構(gòu)的輸出向量，計算所述預(yù)設(shè)網(wǎng)絡(luò)模型結(jié)構(gòu)對應(yīng)的目標(biāo)模型參數(shù)，包括：

利用所述語料文本信息、所述語料停頓信息、所述語料標(biāo)點信息和所述預(yù)設(shè)的網(wǎng)絡(luò)模型結(jié)構(gòu)進(jìn)行前向計算，確定所述預(yù)設(shè)網(wǎng)絡(luò)模型結(jié)構(gòu)對應(yīng)的模型參數(shù)；

利用所述語料文本信息、所述語料停頓信息、所述語料標(biāo)點信息和所述預(yù)設(shè)的網(wǎng)絡(luò)模型結(jié)構(gòu)進(jìn)行后向計算，對所述模型參數(shù)進(jìn)行修正，得到所述目標(biāo)模型參數(shù)。

在該實施例中，分別利用語料文本信息、所述語料停頓信息、所述語料標(biāo)點信息和所述預(yù)設(shè)的網(wǎng)絡(luò)模型結(jié)構(gòu)進(jìn)行前向計算和后向計算，這樣，可以保證得到的目標(biāo)模型參數(shù)的準(zhǔn)確性。

在一個實施例中，所述根據(jù)所述文本信息、所述停頓信息和所述標(biāo)點添加模型，確定所述文本信息對應(yīng)的標(biāo)點信息，包括：

將所述文本信息和所述停頓信息作為所述標(biāo)點添加模型的輸入向量，得到所述標(biāo)點添加模型的輸出向量；

根據(jù)所述標(biāo)點添加模型的輸出向量確定所述文本信息對應(yīng)的標(biāo)點信息。

在該實施例中，標(biāo)點添加模型的輸出向量表示各標(biāo)點可能的概率，這樣，取輸出向量中值最大的維度作為最終結(jié)果。

根據(jù)本發(fā)明實施例的第二方面，提供一種標(biāo)點添加裝置，包括：

獲取模塊，用于獲取包含標(biāo)點的預(yù)設(shè)訓(xùn)練語料信息；

訓(xùn)練模塊，用于利用所述預(yù)設(shè)訓(xùn)練語料信息和預(yù)設(shè)的網(wǎng)絡(luò)模型結(jié)構(gòu)進(jìn)行訓(xùn)練，得到標(biāo)點添加模型，其中，所述預(yù)設(shè)的網(wǎng)絡(luò)模型結(jié)構(gòu)包括編碼器結(jié)構(gòu)和解碼器結(jié)構(gòu)；

接收模塊，用于接收用戶輸入的語音數(shù)據(jù)信息；

識別模塊，用于對所述語音數(shù)據(jù)信息進(jìn)行識別，得到所述語音數(shù)據(jù)信息對應(yīng)的文本信息和停頓信息；

確定模塊，用于根據(jù)所述文本信息、所述停頓信息和所述標(biāo)點添加模型，確定所述文本信息對應(yīng)的標(biāo)點信息。

在一個實施例中，所述編碼器結(jié)構(gòu)包括第一LSTM隱藏層，所述解碼器結(jié)構(gòu)包括第二LSTM隱藏層。

在一個實施例中，所述訓(xùn)練模塊包括：

第一確定子模塊，用于確定所述預(yù)設(shè)訓(xùn)練語料信息對應(yīng)的語料文本信息、語料停頓信息和語料標(biāo)點信息；

計算子模塊，用于將所述語料文本信息和所述語料停頓信息確定為所述預(yù)設(shè)的網(wǎng)絡(luò)模型結(jié)構(gòu)的輸入向量，將所述語料標(biāo)點信息確定為所述預(yù)設(shè)的網(wǎng)絡(luò)模型結(jié)構(gòu)的輸出向量，計算所述預(yù)設(shè)網(wǎng)絡(luò)模型結(jié)構(gòu)對應(yīng)的目標(biāo)模型參數(shù)；

第二確定子模塊，用于根據(jù)所述目標(biāo)模型參數(shù)和所述預(yù)設(shè)的網(wǎng)絡(luò)模型結(jié)構(gòu)確定所述標(biāo)點添加模型。

在一個實施例中，所述計算子模塊用于：

利用所述語料文本信息、所述語料停頓信息、所述語料標(biāo)點信息和所述預(yù)設(shè)的網(wǎng)絡(luò)模型結(jié)構(gòu)進(jìn)行前向計算，確定所述預(yù)設(shè)網(wǎng)絡(luò)模型結(jié)構(gòu)對應(yīng)的模型參數(shù)；

利用所述語料文本信息、所述語料停頓信息、所述語料標(biāo)點信息和所述預(yù)設(shè)的網(wǎng)絡(luò)模型結(jié)構(gòu)進(jìn)行后向計算，對所述模型參數(shù)進(jìn)行修正，得到所述目標(biāo)模型參數(shù)。

在一個實施例中，所述確定模塊包括：

處理子模塊，用于將所述文本信息和所述停頓信息作為所述標(biāo)點添加模型的輸入向量，得到所述標(biāo)點添加模型的輸出向量；

第三確定子模塊，用于根據(jù)所述標(biāo)點添加模型的輸出向量確定所述文本信息對應(yīng)的標(biāo)點信息。

應(yīng)當(dāng)理解的是，以上的一般描述和后文的細(xì)節(jié)描述僅是示例性和解釋性的，并不能限制本發(fā)明。

本發(fā)明的其它特征和優(yōu)點將在隨后的說明書中闡述，并且，部分地從說明書中變得顯而易見，或者通過實施本發(fā)明而了解。本發(fā)明的目的和其他優(yōu)點可通過在所寫的說明書、權(quán)利要求書、以及附圖中所特別指出的結(jié)構(gòu)來實現(xiàn)和獲得。

下面通過附圖和實施例，對本發(fā)明的技術(shù)方案做進(jìn)一步的詳細(xì)描述。

附圖說明

此處的附圖被并入說明書中并構(gòu)成本說明書的一部分，示出了符合本發(fā)明的實施例，并與說明書一起用于解釋本發(fā)明的原理。

圖1是根據(jù)一示例性實施例示出的一種標(biāo)點添加方法的流程圖。

圖2是根據(jù)一示例性實施例示出的一種標(biāo)點添加模型的示意圖。

圖3是根據(jù)一示例性實施例示出的一種標(biāo)點添加方法中步驟S102的流程圖。

圖4是根據(jù)一示例性實施例示出的一種標(biāo)點添加方法中步驟S105的流程圖。

圖5是根據(jù)一示例性實施例示出的一種標(biāo)點添加裝置的框圖。

圖6是根據(jù)一示例性實施例示出的一種標(biāo)點添加裝置中訓(xùn)練模塊的框圖。

圖7是根據(jù)一示例性實施例示出的一種標(biāo)點添加裝置中確定模塊的框圖。

具體實施方式

這里將詳細(xì)地對示例性實施例進(jìn)行說明，其示例表示在附圖中。下面的描述涉及附圖時，除非另有表示，不同附圖中的相同數(shù)字表示相同或相似的要素。以下示例性實施例中所描述的實施方式并不代表與本發(fā)明相一致的所有實施方式。相反，它們僅是與如所附權(quán)利要求書中所詳述的、本發(fā)明的一些方面相一致的裝置和方法的例子。

圖1是根據(jù)一示例性實施例示出的一種標(biāo)點添加方法的流程圖。該標(biāo)點添加方法應(yīng)用于終端設(shè)備中，該終端設(shè)備可以是移動電話，計算機(jī)，數(shù)字廣播終端，消息收發(fā)設(shè)備，游戲控制臺，平板設(shè)備，醫(yī)療設(shè)備，健身設(shè)備，個人數(shù)字助理等任一具有語音識別功能的設(shè)備。如圖1所示，該方法包括步驟S101-S105：

在步驟S101中，獲取包含標(biāo)點的預(yù)設(shè)訓(xùn)練語料信息；

在步驟S102中，利用預(yù)設(shè)訓(xùn)練語料信息和預(yù)設(shè)的網(wǎng)絡(luò)模型結(jié)構(gòu)進(jìn)行訓(xùn)練，得到標(biāo)點添加模型，其中，預(yù)設(shè)的網(wǎng)絡(luò)模型結(jié)構(gòu)包括編碼器結(jié)構(gòu)和解碼器結(jié)構(gòu)；

在步驟S103中，接收用戶輸入的語音數(shù)據(jù)信息；

在步驟S104中，對語音數(shù)據(jù)信息進(jìn)行識別，得到語音數(shù)據(jù)信息對應(yīng)的文本信息和停頓信息；

在步驟S105中，根據(jù)文本信息、停頓信息和標(biāo)點添加模型，確定文本信息對應(yīng)的標(biāo)點信息。

在該實施例中，根據(jù)預(yù)設(shè)訓(xùn)練語料和預(yù)設(shè)的網(wǎng)絡(luò)模型結(jié)構(gòu)進(jìn)行訓(xùn)練，得到包含編碼器結(jié)構(gòu)和解碼器結(jié)構(gòu)的標(biāo)點添加模型，通過該標(biāo)點添加模型為接收到的語音數(shù)據(jù)信息添加標(biāo)點。這樣，可以實現(xiàn)簡單方便地實現(xiàn)標(biāo)點符號的自動添加，并提高標(biāo)點符號添加的準(zhǔn)確性和靈活性。

在一個實施例中，編碼器結(jié)構(gòu)包括第一LSTM隱藏層，解碼器結(jié)構(gòu)包括第二LSTM隱藏層。

下面以一個具體實施例詳細(xì)說明本發(fā)明的技術(shù)方案。

如圖2所示，本發(fā)明的標(biāo)點添加模型包括編碼器encoder結(jié)構(gòu)和解碼器decoder結(jié)構(gòu)，其中，輸入序列為X₁，X₂……X_N，其中，每個輸入包括文字信息和停頓信息，輸出序列為標(biāo)點符號ID或者為空。其中，輸入序列中，文字信息可以為200維的特征向量，停頓信息可以為1維的特征向量，將兩個特征向量做拼接，則得到201維的特征向量，而輸出序列的維度可以為5維，分別為無標(biāo)點、逗號、句號、分號、頓號。編碼器結(jié)構(gòu)對應(yīng)一個隱藏層，解碼器結(jié)構(gòu)對應(yīng)一個隱藏層，即本發(fā)明中有兩個隱藏層，每一層的計算方式可以相同。

圖3是根據(jù)一示例性實施例示出的一種標(biāo)點添加方法中步驟S102的流程圖。

如圖3所示，在一個實施例中，上述步驟S102包括步驟S301-S303：

在步驟S301中，確定預(yù)設(shè)訓(xùn)練語料信息對應(yīng)的語料文本信息、語料停頓信息和語料標(biāo)點信息；

在步驟S302中，將語料文本信息和語料停頓信息確定為預(yù)設(shè)的網(wǎng)絡(luò)模型結(jié)構(gòu)的輸入向量，將語料標(biāo)點信息確定為預(yù)設(shè)的網(wǎng)絡(luò)模型結(jié)構(gòu)的輸出向量，計算預(yù)設(shè)網(wǎng)絡(luò)模型結(jié)構(gòu)對應(yīng)的目標(biāo)模型參數(shù)；

在步驟S303中，根據(jù)目標(biāo)模型參數(shù)和預(yù)設(shè)的網(wǎng)絡(luò)模型結(jié)構(gòu)確定標(biāo)點添加模型。

在一個實施例中，上述步驟S302包括：

利用語料文本信息、語料停頓信息、語料標(biāo)點信息和預(yù)設(shè)的網(wǎng)絡(luò)模型結(jié)構(gòu)進(jìn)行前向計算，確定預(yù)設(shè)網(wǎng)絡(luò)模型結(jié)構(gòu)對應(yīng)的模型參數(shù)；

利用語料文本信息、語料停頓信息、語料標(biāo)點信息和預(yù)設(shè)的網(wǎng)絡(luò)模型結(jié)構(gòu)進(jìn)行后向計算，對模型參數(shù)進(jìn)行修正，得到目標(biāo)模型參數(shù)。

在該實施例中，分別利用語料文本信息、語料停頓信息、語料標(biāo)點信息和預(yù)設(shè)的網(wǎng)絡(luò)模型結(jié)構(gòu)進(jìn)行前向計算和后向計算，這樣，可以保證得到的目標(biāo)模型參數(shù)的準(zhǔn)確性。

圖4是根據(jù)一示例性實施例示出的一種標(biāo)點添加方法中步驟S105的流程圖。

如圖4所示，在一個實施例中，上述步驟S105包括步驟S401-S402：

在步驟S401中，將文本信息和停頓信息作為標(biāo)點添加模型的輸入向量，得到標(biāo)點添加模型的輸出向量；

在步驟S402中，根據(jù)標(biāo)點添加模型的輸出向量確定文本信息對應(yīng)的標(biāo)點信息。

在該實施例中，標(biāo)點添加模型的輸出向量表示各標(biāo)點可能的概率，這樣，取輸出向量中值最大的維度作為最終結(jié)果。

下述為本發(fā)明裝置實施例，可以用于執(zhí)行本發(fā)明方法實施例。

圖5是根據(jù)一示例性實施例示出的一種標(biāo)點添加裝置的框圖，該裝置可以通過軟件、硬件或者兩者的結(jié)合實現(xiàn)成為終端設(shè)備的部分或者全部。如圖5所示，該標(biāo)點添加裝置包括：

獲取模塊51，用于獲取包含標(biāo)點的預(yù)設(shè)訓(xùn)練語料信息；

訓(xùn)練模塊52，用于利用所述預(yù)設(shè)訓(xùn)練語料信息和預(yù)設(shè)的網(wǎng)絡(luò)模型結(jié)構(gòu)進(jìn)行訓(xùn)練，得到標(biāo)點添加模型，其中，所述預(yù)設(shè)的網(wǎng)絡(luò)模型結(jié)構(gòu)包括編碼器結(jié)構(gòu)和解碼器結(jié)構(gòu)；

接收模塊53，用于接收用戶輸入的語音數(shù)據(jù)信息；

識別模塊54，用于對所述語音數(shù)據(jù)信息進(jìn)行識別，得到所述語音數(shù)據(jù)信息對應(yīng)的文本信息和停頓信息；

確定模塊55，用于根據(jù)所述文本信息、所述停頓信息和所述標(biāo)點添加模型，確定所述文本信息對應(yīng)的標(biāo)點信息。

在該實施例中，根據(jù)預(yù)設(shè)訓(xùn)練語料和預(yù)設(shè)的網(wǎng)絡(luò)模型結(jié)構(gòu)進(jìn)行訓(xùn)練，得到包含編碼器結(jié)構(gòu)和解碼器結(jié)構(gòu)的標(biāo)點添加模型，通過該標(biāo)點添加模型為接收到的語音數(shù)據(jù)信息添加標(biāo)點。這樣，可以實現(xiàn)簡單方便地實現(xiàn)標(biāo)點符號的自動添加，并提高標(biāo)點符號添加的準(zhǔn)確性和靈活性。

在一個實施例中，所述編碼器結(jié)構(gòu)包括第一LSTM隱藏層，所述解碼器結(jié)構(gòu)包括第二LSTM隱藏層。

圖6是根據(jù)一示例性實施例示出的一種標(biāo)點添加裝置中訓(xùn)練模塊的框圖。

如圖6所示，在一個實施例中，所述訓(xùn)練模塊52包括：

第一確定子模塊61，用于確定所述預(yù)設(shè)訓(xùn)練語料信息對應(yīng)的語料文本信息、語料停頓信息和語料標(biāo)點信息；

計算子模塊62，用于將所述語料文本信息和所述語料停頓信息確定為所述預(yù)設(shè)的網(wǎng)絡(luò)模型結(jié)構(gòu)的輸入向量，將所述語料標(biāo)點信息確定為所述預(yù)設(shè)的網(wǎng)絡(luò)模型結(jié)構(gòu)的輸出向量，計算所述預(yù)設(shè)網(wǎng)絡(luò)模型結(jié)構(gòu)對應(yīng)的目標(biāo)模型參數(shù)；

第二確定子模塊63，用于根據(jù)所述目標(biāo)模型參數(shù)和所述預(yù)設(shè)的網(wǎng)絡(luò)模型結(jié)構(gòu)確定所述標(biāo)點添加模型。

在一個實施例中，所述計算子模塊62用于：

利用所述語料文本信息、所述語料停頓信息、所述語料標(biāo)點信息和所述預(yù)設(shè)的網(wǎng)絡(luò)模型結(jié)構(gòu)進(jìn)行前向計算，確定所述預(yù)設(shè)網(wǎng)絡(luò)模型結(jié)構(gòu)對應(yīng)的模型參數(shù)；

利用所述語料文本信息、所述語料停頓信息、所述語料標(biāo)點信息和所述預(yù)設(shè)的網(wǎng)絡(luò)模型結(jié)構(gòu)進(jìn)行后向計算，對所述模型參數(shù)進(jìn)行修正，得到所述目標(biāo)模型參數(shù)。

在該實施例中，分別利用語料文本信息、所述語料停頓信息、所述語料標(biāo)點信息和所述預(yù)設(shè)的網(wǎng)絡(luò)模型結(jié)構(gòu)進(jìn)行前向計算和后向計算，這樣，可以保證得到的目標(biāo)模型參數(shù)的準(zhǔn)確性。

圖7是根據(jù)一示例性實施例示出的一種標(biāo)點添加裝置中確定模塊的框圖。

如圖7所示，在一個實施例中，所述確定模塊55包括：

處理子模塊71，用于將所述文本信息和所述停頓信息作為所述標(biāo)點添加模型的輸入向量，得到所述標(biāo)點添加模型的輸出向量；

第三確定子模塊72，用于根據(jù)所述標(biāo)點添加模型的輸出向量確定所述文本信息對應(yīng)的標(biāo)點信息。

在該實施例中，標(biāo)點添加模型的輸出向量表示各標(biāo)點可能的概率，這樣，取輸出向量中值最大的維度作為最終結(jié)果。

本領(lǐng)域內(nèi)的技術(shù)人員應(yīng)明白，本發(fā)明的實施例可提供為方法、系統(tǒng)、或計算機(jī)程序產(chǎn)品。因此，本發(fā)明可采用完全硬件實施例、完全軟件實施例、或結(jié)合軟件和硬件方面的實施例的形式。而且，本發(fā)明可采用在一個或多個其中包含有計算機(jī)可用程序代碼的計算機(jī)可用存儲介質(zhì)(包括但不限于磁盤存儲器和光學(xué)存儲器等)上實施的計算機(jī)程序產(chǎn)品的形式。

本發(fā)明是參照根據(jù)本發(fā)明實施例的方法、設(shè)備(系統(tǒng))、和計算機(jī)程序產(chǎn)品的流程圖和/或方框圖來描述的。應(yīng)理解可由計算機(jī)程序指令實現(xiàn)流程圖和/或方框圖中的每一流程和/或方框、以及流程圖和/或方框圖中的流程和/或方框的結(jié)合?？商峁┻@些計算機(jī)程序指令到通用計算機(jī)、專用計算機(jī)、嵌入式處理機(jī)或其他可編程數(shù)據(jù)處理設(shè)備的處理器以產(chǎn)生一個機(jī)器，使得通過計算機(jī)或其他可編程數(shù)據(jù)處理設(shè)備的處理器執(zhí)行的指令產(chǎn)生用于實現(xiàn)在流程圖一個流程或多個流程和/或方框圖一個方框或多個方框中指定的功能的裝置。

這些計算機(jī)程序指令也可存儲在能引導(dǎo)計算機(jī)或其他可編程數(shù)據(jù)處理設(shè)備以特定方式工作的計算機(jī)可讀存儲器中，使得存儲在該計算機(jī)可讀存儲器中的指令產(chǎn)生包括指令裝置的制造品，該指令裝置實現(xiàn)在流程圖一個流程或多個流程和/或方框圖一個方框或多個方框中指定的功能。

這些計算機(jī)程序指令也可裝載到計算機(jī)或其他可編程數(shù)據(jù)處理設(shè)備上，使得在計算機(jī)或其他可編程設(shè)備上執(zhí)行一系列操作步驟以產(chǎn)生計算機(jī)實現(xiàn)的處理，從而在計算機(jī)或其他可編程設(shè)備上執(zhí)行的指令提供用于實現(xiàn)在流程圖一個流程或多個流程和/或方框圖一個方框或多個方框中指定的功能的步驟。

顯然，本領(lǐng)域的技術(shù)人員可以對本發(fā)明進(jìn)行各種改動和變型而不脫離本發(fā)明的精神和范圍。這樣，倘若本發(fā)明的這些修改和變型屬于本發(fā)明權(quán)利要求及其等同技術(shù)的范圍之內(nèi)，則本發(fā)明也意圖包含這些改動和變型在內(nèi)。