技術(shù)特征：

1.一種信息檢索方法，其特征在于，所述方法包括：

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述文本信息提取模型包括：分詞層和文本特征提塊；所述文本特征提塊包括預(yù)設(shè)數(shù)量的文本提取層；所述圖像信息提取模型包括：檢測(cè)層、全連接層和圖像特征提取塊；所述圖像特征提塊包括預(yù)設(shè)數(shù)量的圖像提取層；所述預(yù)設(shè)數(shù)量的文本提取層和所述預(yù)設(shè)數(shù)量的圖像提取層按照順序一一對(duì)應(yīng)；所述通過(guò)待訓(xùn)練的跨模態(tài)信息檢索模型中的文本信息提取模型、圖像信息提取模型以及跨注意力模塊，生成文本融合特征和圖像融合特征，包括：

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述文本信息提取模型還包括：文本哈希層；所述圖像信息提取模型還包括：圖像哈希層；

4.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述基于自適應(yīng)三重?fù)p失函數(shù)和量化損失函數(shù)，確定所述文本哈希碼和所述圖像哈希碼的總損失，包括：

5.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述圖像數(shù)據(jù)包括n個(gè)圖像，所述文本數(shù)據(jù)包括描述每個(gè)圖像的n個(gè)文本；

6.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述訓(xùn)練好的跨模態(tài)信息檢索模型用于根據(jù)輸入的文本來(lái)檢索圖像，包括：

7.一種信息檢索裝置，其特征在于，所述裝置包括：

8.一種計(jì)算機(jī)設(shè)備，包括存儲(chǔ)器和處理器，所述存儲(chǔ)器存儲(chǔ)有計(jì)算機(jī)程序，其特征在于，所述處理器執(zhí)行所述計(jì)算機(jī)程序時(shí)實(shí)現(xiàn)權(quán)利要求1至6中任一項(xiàng)所述的方法的步驟。

9.一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其上存儲(chǔ)有計(jì)算機(jī)程序，其特征在于，所述計(jì)算機(jī)程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)權(quán)利要求1至6中任一項(xiàng)所述的方法的步驟。

10.一種計(jì)算機(jī)程序產(chǎn)品，包括計(jì)算機(jī)程序，其特征在于，所述計(jì)算機(jī)程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)權(quán)利要求1至6中任一項(xiàng)所述的方法的步驟。

技術(shù)總結(jié)
本申請(qǐng)涉及一種信息檢索方法、裝置、計(jì)算機(jī)設(shè)備、計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)和計(jì)算機(jī)程序產(chǎn)品。所述方法包括：獲取文本數(shù)據(jù)和圖像數(shù)據(jù)，基于所述文本數(shù)據(jù)和所述圖像數(shù)據(jù)建立多個(gè)樣本對(duì)；對(duì)于每個(gè)樣本對(duì)，通過(guò)待訓(xùn)練的跨模態(tài)信息檢索模型中的文本信息提取模型、圖像信息提取模型以及跨注意力模塊，生成文本融合特征和圖像融合特征；并將所述文本融合特征轉(zhuǎn)換為文本哈希碼，將所述圖像融合特征轉(zhuǎn)換為圖像哈希碼；基于自適應(yīng)三重?fù)p失函數(shù)和量化損失函數(shù)，確定所述文本哈希碼和所述圖像哈希碼的總損失；基于所述總損失，優(yōu)化所述待訓(xùn)練的跨模態(tài)信息檢索模型，得到訓(xùn)練好的跨模態(tài)信息檢索模型。采用本方法能夠?qū)R模態(tài)間的語(yǔ)義，提升跨模態(tài)檢索的精度。

技術(shù)研發(fā)人員：王幸,趙賢峰,徐強(qiáng)超,林丹,程振華,譚桂軒,李津,陳文睿,劉一民,伍維健,林湃煜,鐘華,劉燦萍
受保護(hù)的技術(shù)使用者：廣東電網(wǎng)有限責(zé)任公司廣州供電局
技術(shù)研發(fā)日：
技術(shù)公布日：2025/5/15