本申請涉及數(shù)據(jù)分析，特別涉及一種多模態(tài)科研數(shù)據(jù)記錄方法、系統(tǒng)、終端及存儲介質(zhì)。

背景技術(shù)：

1、傳統(tǒng)的實驗記錄方法雖然可以導(dǎo)入文本數(shù)據(jù)、語音數(shù)據(jù)、拍照手寫記錄以及實驗儀器設(shè)備輸出的標(biāo)準(zhǔn)化數(shù)據(jù)等。但是，這些數(shù)據(jù)仍需要科研人員手動輸入或以較為被動的方式導(dǎo)入記錄平臺，記錄效率和便捷性不足，記錄效率低下、操作復(fù)雜的問題。尤其是在實驗過程繁忙或需要快速記錄的情況下，現(xiàn)有工具的便捷性難以滿足需求。

2、而且，雖然可以支持多種模態(tài)數(shù)據(jù)，但對于不同模態(tài)的數(shù)據(jù)之間的關(guān)聯(lián)和整合不夠緊密，影響了實驗記錄的全面性和準(zhǔn)確性。另外，傳統(tǒng)的實驗記錄嚴格依照模板的格式書寫，不夠靈活。

技術(shù)實現(xiàn)思路

1、有鑒于現(xiàn)有技術(shù)中存在的上述至少一個技術(shù)問題而提出了本申請。根據(jù)本申請的第一方案，提供了一種多模態(tài)科研數(shù)據(jù)記錄方法，應(yīng)用于多模態(tài)科研數(shù)據(jù)錄入系統(tǒng)，所述多模態(tài)科研數(shù)據(jù)錄入系統(tǒng)包括后端模塊；所述方法包括：

2、基于當(dāng)前科研單元方案，通過輸入接口接收由輸入裝置采集的多模態(tài)科研數(shù)據(jù)；其中，所述多模態(tài)科研數(shù)據(jù)包括以下至少一種數(shù)據(jù)形式：文本數(shù)據(jù)、語音數(shù)據(jù)、圖像數(shù)據(jù)和結(jié)構(gòu)化數(shù)據(jù)；

3、基于數(shù)據(jù)字段格式規(guī)范，調(diào)用所述后端模塊對所述多模態(tài)科研數(shù)據(jù)進行結(jié)構(gòu)化處理，以使所述多模態(tài)科研數(shù)據(jù)轉(zhuǎn)換為結(jié)構(gòu)化操作指令；

4、依照科研單元方案將所述結(jié)構(gòu)化操作指令轉(zhuǎn)換為結(jié)構(gòu)化科研記錄。

5、本申請實施例的多模態(tài)科研數(shù)據(jù)記錄方法，通過將對所述多模態(tài)科研數(shù)據(jù)進行結(jié)構(gòu)化處理形成結(jié)構(gòu)化操作指令，依照科研單元方案將所述結(jié)構(gòu)化操作指令轉(zhuǎn)換為結(jié)構(gòu)化科研記錄，這樣可以減少手動輸入時間，提高實驗記錄效率，而且自動識別和記錄多模態(tài)科研數(shù)據(jù)，并通過對話交互修正錯誤，確保了數(shù)據(jù)準(zhǔn)確性和一致性。

6、上述說明僅是本申請技術(shù)方案的概述，為了能夠更清楚了解本申請的技術(shù)手段，而可依照說明書的內(nèi)容予以實施，并且為了讓本申請的上述和其它目的、特征和優(yōu)點能夠更明顯易懂，以下特舉本申請的具體實施方式。

7、應(yīng)當(dāng)理解，前面的大體描述以及后續(xù)的詳細描述只是例示性的和說明性的，并非對所要求保護的本發(fā)明的限制。

技術(shù)特征：

1.一種多模態(tài)科研數(shù)據(jù)記錄方法，其特征在于，應(yīng)用于多模態(tài)科研數(shù)據(jù)錄入系統(tǒng)，所述多模態(tài)科研數(shù)據(jù)錄入系統(tǒng)包括后端模塊；所述方法包括：

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，基于數(shù)據(jù)字段格式規(guī)范，調(diào)用所述后端模塊對所述多模態(tài)科研數(shù)據(jù)進行結(jié)構(gòu)化處理，以使所述多模態(tài)科研數(shù)據(jù)轉(zhuǎn)換為結(jié)構(gòu)化操作指令，包括：

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述多模態(tài)科研數(shù)據(jù)為語音數(shù)據(jù)；所述方法還包括：

4.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述多模態(tài)科研數(shù)據(jù)為圖像數(shù)據(jù)；所述方法還包括：

5.根據(jù)權(quán)利要求1所述的方法，其特征在于，其中，所述文本數(shù)據(jù)屬于非結(jié)構(gòu)化文本數(shù)據(jù)。

6.根據(jù)權(quán)利要求3至5任一項所述的方法，其特征在于，所多模態(tài)科研數(shù)據(jù)錄入系統(tǒng)還包括交互前端模塊；所述交互前端模塊包括第一顯示區(qū)域和第二顯示區(qū)域；所述方法還包括：

7.根據(jù)權(quán)利要求6所述的方法，其特征在于，所述多模態(tài)科研數(shù)據(jù)為結(jié)構(gòu)化數(shù)據(jù)；所述方法包括：

8.根據(jù)權(quán)利要求6所述的方法，其特征在于，所述方法還包括：

9.根據(jù)權(quán)利要求6所述的方法，其特征在于，依照科研單元方案將所述非結(jié)構(gòu)化文本指令轉(zhuǎn)換為結(jié)構(gòu)化操作指令，包括：

10.根據(jù)權(quán)利要求9所述的方法，其特征在于，基于所述當(dāng)前科研單元方案提示詞，并采用預(yù)設(shè)算法對所述非結(jié)構(gòu)化文本指令進行分析和理解，以將所述非結(jié)構(gòu)化文本指令轉(zhuǎn)換成對應(yīng)的結(jié)構(gòu)化操作指令，進一步包括：

11.根據(jù)權(quán)利要求10所述的方法，其特征在于，其中，所述科研單元方案提示詞是事先預(yù)置在所述后端模塊中的；和/或，所述科研單元方案提示詞是根據(jù)當(dāng)前科研單元方案對應(yīng)的知識庫由所述后端模塊自動創(chuàng)建的。

12.根據(jù)權(quán)利要求7所述的方法，其特征在于，依照科研單元方案將所述結(jié)構(gòu)化操作指令轉(zhuǎn)換為結(jié)構(gòu)化科研記錄，包括：

13.根據(jù)權(quán)利要求12所述的方法，其特征在于，所述方法還包括：基于數(shù)據(jù)字段格式規(guī)范，調(diào)用所述后端模塊對所述多模態(tài)科研數(shù)據(jù)進行結(jié)構(gòu)化處理，以使所述多模態(tài)科研數(shù)據(jù)轉(zhuǎn)換為結(jié)構(gòu)化操作指令，包括：

14.根據(jù)權(quán)利要求12或13所述的方法，其特征在于，所述方法還包括：

15.根據(jù)權(quán)利要求14所述的方法，其特征在于，所述科研單元方案數(shù)據(jù)字段輸入框還用于存儲多項數(shù)據(jù)記錄；所述方法還包括：

16.根據(jù)權(quán)利要求14所述的方法，其特征在于，所述方法還包括：

17.根據(jù)權(quán)利要求16所述的方法，其特征在于，所述方法還包括：

18.根據(jù)權(quán)利要求6所述的方法，其特征在于，

19.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述方法還包括：

20.根據(jù)權(quán)利要求1所述的方法，其特征在于，

21.一種多模態(tài)科研數(shù)據(jù)錄入系統(tǒng)，其特征在于，所述系統(tǒng)包括后端模塊和交互前端模塊；其中，

22.一種支持多模態(tài)科研數(shù)據(jù)錄入的終端，其特征在于，所述終端包括：

23.一種存儲介質(zhì)，其特征在于，所述存儲介質(zhì)上存儲有計算機程序，所述計算機程序在被處理器運行時使得所述處理器執(zhí)行如權(quán)利要求1至20任一項所述的多模態(tài)科研數(shù)據(jù)記錄方法。

24.一種計算機程序產(chǎn)品，其特征在于，該計算機程序/指令被處理器執(zhí)行時實現(xiàn)如權(quán)利要求1至20任一項所述方法的步驟。

技術(shù)總結(jié)
本申請?zhí)峁┮环N多模態(tài)科研數(shù)據(jù)記錄方法、系統(tǒng)、終端及存儲介質(zhì)。所述方法應(yīng)用于多模態(tài)科研數(shù)據(jù)錄入系統(tǒng)，所述多模態(tài)科研數(shù)據(jù)錄入系統(tǒng)包括后端模塊；所述方法包括：基于當(dāng)前科研單元方案，通過輸入接口接收由輸入裝置采集的多模態(tài)科研數(shù)據(jù)；所述多模態(tài)科研數(shù)據(jù)包括以下至少一種數(shù)據(jù)形式：文本數(shù)據(jù)、語音數(shù)據(jù)、圖像數(shù)據(jù)和結(jié)構(gòu)化數(shù)據(jù)；基于數(shù)據(jù)字段格式規(guī)范，調(diào)用所述后端模塊對所述多模態(tài)科研數(shù)據(jù)進行結(jié)構(gòu)化處理，以生成結(jié)構(gòu)化操作指令；依照科研單元方案將所述結(jié)構(gòu)化操作指令轉(zhuǎn)換為結(jié)構(gòu)化科研記錄。本申請實施例可以減少手動輸入時間，提高實驗記錄效率，而且自動識別和記錄多模態(tài)科研數(shù)據(jù)，并通過對話交互修正錯誤，確保了數(shù)據(jù)準(zhǔn)確性和一致性。

技術(shù)研發(fā)人員：張岳,楊子杰,周啟楫,郭放,潘俊樹,盧攀忠,許田
受保護的技術(shù)使用者：西湖大學(xué)
技術(shù)研發(fā)日：
技術(shù)公布日：2025/5/15