本發(fā)明涉及信息安全，特別是涉及一種網(wǎng)絡(luò)媒體設(shè)備實時威脅感知方法、裝置及電子設(shè)備。

背景技術(shù)：

1、在現(xiàn)代社會中，電子顯示屏等媒體設(shè)備已經(jīng)成為不可或缺的信息展示工具，廣泛應(yīng)用于商業(yè)廣告、公共信息公告、群眾宣傳教育等多個領(lǐng)域。這些媒體設(shè)備不僅提升了信息的傳播效率和覆蓋面，也極大地豐富了人們的日常生活。隨著技術(shù)的發(fā)展，網(wǎng)絡(luò)媒體設(shè)備的應(yīng)用場景日益增多，它們大多通過云端中心資源服務(wù)器存儲播放內(nèi)容，不同位置的網(wǎng)絡(luò)媒體播放設(shè)備通過網(wǎng)絡(luò)獲取播放資源進行播放。這種集中統(tǒng)一的管理方式不僅提高了播放內(nèi)容的更新效率，也降低了運營成本。

2、然而，在公眾場合，網(wǎng)絡(luò)媒體設(shè)備由于顯示屏數(shù)量大、受眾廣泛，成為了不法分子攻擊的重點目標(biāo)。通過網(wǎng)絡(luò)攻擊，不法分子可以調(diào)換或篡改媒體設(shè)備的播放內(nèi)容，進而傳播虛假信息或進行惡意宣傳，這不僅會對公眾造成誤導(dǎo)，還可能引發(fā)社會恐慌和不穩(wěn)定因素。因此，網(wǎng)絡(luò)媒體設(shè)備的安全問題日益凸顯，如何保障這些設(shè)備的正常運行和內(nèi)容安全，成為了亟待解決的技術(shù)難題。

3、因此，提出一種網(wǎng)絡(luò)媒體設(shè)備實時威脅感知方法、裝置及電子設(shè)備。

技術(shù)實現(xiàn)思路

1、本說明書提供一種網(wǎng)絡(luò)媒體設(shè)備實時威脅感知方法、裝置及電子設(shè)備，能夠有效提高網(wǎng)絡(luò)媒體設(shè)備實時威脅感知的準(zhǔn)確性。

2、本說明書提供一種網(wǎng)絡(luò)媒體設(shè)備實時威脅感知方法，包括：

3、威脅監(jiān)測服務(wù)器通過資源服務(wù)器獲取網(wǎng)絡(luò)媒體設(shè)備的待播放內(nèi)容；

4、所述威脅監(jiān)測服務(wù)器對所述待播放內(nèi)容解析，得到人臉及場景特征序列、高頻中心詞集合序列、音頻指紋序列；

5、威脅感知設(shè)備獲取所述網(wǎng)絡(luò)媒體設(shè)備的當(dāng)前播放內(nèi)容，并對所述當(dāng)前播放內(nèi)容進行解析，得到當(dāng)前播放內(nèi)容的人臉及場景特征序列、當(dāng)前播放內(nèi)容的高頻中心詞集合序列、當(dāng)前播放內(nèi)容的音頻指紋序列；

6、所述威脅感知設(shè)備分別將所述當(dāng)前播放內(nèi)容的人臉及場景特征序列與所述人臉及場景特征序列、所述當(dāng)前播放內(nèi)容的高頻中心詞集合序列與所述高頻中心詞集合序列、所述當(dāng)前播放內(nèi)容的音頻指紋序列與音頻指紋序列進行比對，判斷所述當(dāng)前播放內(nèi)容是否合法；

7、所述威脅感知設(shè)備判定所述當(dāng)前播放內(nèi)容不合法時，感知所述網(wǎng)絡(luò)媒體設(shè)備處于被威脅狀態(tài)。

8、可選的，所述威脅監(jiān)測服務(wù)器對所述待播放內(nèi)容解析，得到人臉及場景特征序列，包括：

9、對所述待播放內(nèi)容進行分幀處理，得到若干個單幀圖像及其順序；

10、分別對所述單幀圖像進行人臉識別，得到人臉特征集合；

11、分別對所述單幀圖像進行場景識別，得到場景特征集合；

12、逐一比對連續(xù)的兩個所述單幀圖像的人臉特征集合中的人臉數(shù)量及人臉特征；

13、當(dāng)連續(xù)的兩個所述單幀圖像的所述人臉特征集合中的人臉數(shù)量相等，且所述人臉特征相同時，判定連續(xù)的兩個所述單幀圖像人臉重復(fù)；

14、逐一比對連續(xù)的兩個所述單幀圖像的所述場景特征集合中物體數(shù)量及場景特征；

15、當(dāng)連續(xù)的兩個所述單幀圖像的所述場景特征集合中物體數(shù)量相等，且所述場景特征相同時，判定連續(xù)的兩個所述單幀圖像場景重復(fù)；

16、當(dāng)連續(xù)的兩個所述單幀圖像人臉重復(fù)，且場景重復(fù)時，刪除所述單幀圖像的順序在后的所述單幀圖像；

17、返回所述逐一比對連續(xù)的兩個所述單幀圖像的人臉特征集合中的人臉數(shù)量及人臉特征，直至所有單幀圖像比對完成，得到人臉及場景特征序列。

18、可選的，所述威脅監(jiān)測服務(wù)器對所述待播放內(nèi)容解析，得到高頻中心詞集合序列，包括：

19、對所述待播放內(nèi)容進行分幀處理，得到若干個單幀圖像及其順序；

20、分別對所述單幀圖像進行文字提取，得到高頻中心詞集合；

21、逐一比對連續(xù)的兩個所述單幀圖像的高頻中心詞集合，得到連續(xù)的兩個所述單幀圖像的高頻中心詞相似度；

22、判斷連續(xù)的兩個所述單幀圖像的高頻中心詞相似度是否滿足預(yù)設(shè)相似度；

23、當(dāng)連續(xù)的兩個所述單幀圖像的高頻中心詞相似度滿足預(yù)設(shè)相似度時，刪除所述單幀圖像的順序在后的所述單幀圖像；

24、返回所述逐一比對連續(xù)的兩個所述單幀圖像的高頻中心詞集合，得到連續(xù)的兩個所述單幀圖像的高頻中心詞相似度，直至所有單幀圖像比對完成，得到高頻中心詞集合序列。

25、可選的，所述威脅監(jiān)測服務(wù)器對所述待播放內(nèi)容解析，得到音頻指紋序列，包括：

26、通過chromaprint開源音頻指紋算法庫對所述待播放內(nèi)容解析，得到音頻指紋序列。

27、可選的，所述威脅感知設(shè)備分別將所述當(dāng)前播放內(nèi)容的人臉及場景特征序列與所述人臉及場景特征序列，判斷所述當(dāng)前播放內(nèi)容是否合法，包括：

28、逐一比對所述當(dāng)前播放內(nèi)容的人臉及場景特征序列中的人臉數(shù)量及人臉特征與所述人臉及場景特征序列中的人臉數(shù)量及人臉特征；

29、當(dāng)所述當(dāng)前播放內(nèi)容的人臉及場景特征序列中的所述人臉特征集合中的人臉數(shù)量與所述人臉及場景特征序列中的人臉數(shù)量相等，且所述人臉特征相同時，判定所述當(dāng)前播放內(nèi)容的人臉特征序列合法；

30、逐一比對連續(xù)的兩個所述單幀圖像的所述場景特征集合中物體數(shù)量及場景特征；

31、當(dāng)所述當(dāng)前播放內(nèi)容的人臉及場景特征序列中的物體數(shù)量與所述人臉及場景特征序列中的物體數(shù)量相等，且所述場景特征相同時，判定所述當(dāng)前播放內(nèi)容的場景特征序列合法；

32、基于所述人臉特征序列和所述場景特征序列判斷所述當(dāng)前播放內(nèi)容的圖像內(nèi)容是否合法。

33、可選的，所述威脅感知設(shè)備分別將所述當(dāng)前播放內(nèi)容的高頻中心詞集合序列與所述高頻中心詞集合序列、所述當(dāng)前播放內(nèi)容的音頻指紋序列與音頻指紋序列進行比對，判斷所述當(dāng)前播放內(nèi)容是否合法，包括：

34、判斷所述當(dāng)前播放內(nèi)容的高頻中心詞集合序列的高頻中心詞與所述高頻中心詞集合序列的高頻中心詞相似度是否滿足預(yù)設(shè)相似度；

35、和，

36、判斷所述當(dāng)前播放內(nèi)容的音頻指紋序列與所述音頻指紋序列是否重合。

37、可選的，所述威脅感知設(shè)備判定所述當(dāng)前播放內(nèi)容不合法時，感知所述網(wǎng)絡(luò)媒體設(shè)備處于被威脅狀態(tài)，包括：

38、所述威脅感知設(shè)備判定所述當(dāng)前播放內(nèi)容不合法為圖像內(nèi)容不合法、高頻中心詞不合法、音頻不合法任一不合法；

39、記錄所述當(dāng)前播放內(nèi)容不合法次數(shù)，判斷所述當(dāng)前播放內(nèi)容不合法次數(shù)是否超過預(yù)設(shè)次數(shù)；

40、當(dāng)所述當(dāng)前播放內(nèi)容不合法次數(shù)超過預(yù)設(shè)次數(shù)時，認(rèn)定所述網(wǎng)絡(luò)媒體設(shè)備處于被威脅狀態(tài)。

41、本說明書提供一種網(wǎng)絡(luò)媒體設(shè)備實時威脅感知裝置，包括：

42、威脅監(jiān)測服務(wù)器通過資源服務(wù)器獲取網(wǎng)絡(luò)媒體設(shè)備的待播放內(nèi)容；

43、所述威脅監(jiān)測服務(wù)器對所述待播放內(nèi)容解析，得到人臉及場景特征序列、高頻中心詞集合序列、音頻指紋序列；

44、威脅感知設(shè)備獲取所述網(wǎng)絡(luò)媒體設(shè)備的當(dāng)前播放內(nèi)容，并對所述當(dāng)前播放內(nèi)容進行解析，得到當(dāng)前播放內(nèi)容的人臉及場景特征序列、當(dāng)前播放內(nèi)容的高頻中心詞集合序列、當(dāng)前播放內(nèi)容的音頻指紋序列；

45、所述威脅感知設(shè)備分別將所述當(dāng)前播放內(nèi)容的人臉及場景特征序列與所述人臉及場景特征序列、所述當(dāng)前播放內(nèi)容的高頻中心詞集合序列與所述高頻中心詞集合序列、所述當(dāng)前播放內(nèi)容的音頻指紋序列與音頻指紋序列進行比對，判斷所述當(dāng)前播放內(nèi)容是否合法；

46、所述威脅感知設(shè)備判定所述當(dāng)前播放內(nèi)容不合法時，感知所述網(wǎng)絡(luò)媒體設(shè)備處于被威脅狀態(tài)。

47、可選的，所述威脅監(jiān)測服務(wù)器對所述待播放內(nèi)容解析，得到人臉及場景特征序列，包括：

48、對所述待播放內(nèi)容進行分幀處理，得到若干個單幀圖像及其順序；

49、分別對所述單幀圖像進行人臉識別，得到人臉特征集合；

50、分別對所述單幀圖像進行場景識別，得到場景特征集合；

51、逐一比對連續(xù)的兩個所述單幀圖像的人臉特征集合中的人臉數(shù)量及人臉特征；

52、當(dāng)連續(xù)的兩個所述單幀圖像的所述人臉特征集合中的人臉數(shù)量相等，且所述人臉特征相同時，判定連續(xù)的兩個所述單幀圖像人臉重復(fù)；

53、逐一比對連續(xù)的兩個所述單幀圖像的所述場景特征集合中物體數(shù)量及場景特征；

54、當(dāng)連續(xù)的兩個所述單幀圖像的所述場景特征集合中物體數(shù)量相等，且所述場景特征相同時，判定連續(xù)的兩個所述單幀圖像場景重復(fù)；

55、當(dāng)連續(xù)的兩個所述單幀圖像人臉重復(fù)，且場景重復(fù)時，刪除所述單幀圖像的順序在后的所述單幀圖像；

56、返回所述逐一比對連續(xù)的兩個所述單幀圖像的人臉特征集合中的人臉數(shù)量及人臉特征，直至所有單幀圖像比對完成，得到人臉及場景特征序列。

57、可選的，所述威脅監(jiān)測服務(wù)器對所述待播放內(nèi)容解析，得到高頻中心詞集合序列，包括：

58、對所述待播放內(nèi)容進行分幀處理，得到若干個單幀圖像及其順序；

59、分別對所述單幀圖像進行文字提取，得到高頻中心詞集合；

60、逐一比對連續(xù)的兩個所述單幀圖像的高頻中心詞集合，得到連續(xù)的兩個所述單幀圖像的高頻中心詞相似度；

61、判斷連續(xù)的兩個所述單幀圖像的高頻中心詞相似度是否滿足預(yù)設(shè)相似度；

62、當(dāng)連續(xù)的兩個所述單幀圖像的高頻中心詞相似度滿足預(yù)設(shè)相似度時，刪除所述單幀圖像的順序在后的所述單幀圖像；

63、返回所述逐一比對連續(xù)的兩個所述單幀圖像的高頻中心詞集合，得到連續(xù)的兩個所述單幀圖像的高頻中心詞相似度，直至所有單幀圖像比對完成，得到高頻中心詞集合序列。

64、可選的，所述威脅監(jiān)測服務(wù)器對所述待播放內(nèi)容解析，得到音頻指紋序列，包括：

65、通過chromaprint開源音頻指紋算法庫對所述待播放內(nèi)容解析，得到音頻指紋序列。

66、可選的，所述威脅感知設(shè)備分別將所述當(dāng)前播放內(nèi)容的人臉及場景特征序列與所述人臉及場景特征序列，判斷所述當(dāng)前播放內(nèi)容是否合法，包括：

67、逐一比對所述當(dāng)前播放內(nèi)容的人臉及場景特征序列中的人臉數(shù)量及人臉特征與所述人臉及場景特征序列中的人臉數(shù)量及人臉特征；

68、當(dāng)所述當(dāng)前播放內(nèi)容的人臉及場景特征序列中的所述人臉特征集合中的人臉數(shù)量與所述人臉及場景特征序列中的人臉數(shù)量相等，且所述人臉特征相同時，判定所述當(dāng)前播放內(nèi)容的人臉特征序列合法；

69、逐一比對連續(xù)的兩個所述單幀圖像的所述場景特征集合中物體數(shù)量及場景特征；

70、當(dāng)所述當(dāng)前播放內(nèi)容的人臉及場景特征序列中的物體數(shù)量與所述人臉及場景特征序列中的物體數(shù)量相等，且所述場景特征相同時，判定所述當(dāng)前播放內(nèi)容的場景特征序列合法；

71、基于所述人臉特征序列和所述場景特征序列判斷所述當(dāng)前播放內(nèi)容的圖像內(nèi)容是否合法。

72、可選的，所述威脅感知設(shè)備分別將所述當(dāng)前播放內(nèi)容的高頻中心詞集合序列與所述高頻中心詞集合序列、所述當(dāng)前播放內(nèi)容的音頻指紋序列與音頻指紋序列進行比對，判斷所述當(dāng)前播放內(nèi)容是否合法，包括：

73、判斷所述當(dāng)前播放內(nèi)容的高頻中心詞集合序列的高頻中心詞與所述高頻中心詞集合序列的高頻中心詞相似度是否滿足預(yù)設(shè)相似度；

74、和，

75、判斷所述當(dāng)前播放內(nèi)容的音頻指紋序列與所述音頻指紋序列是否重合。

76、可選的，所述威脅感知設(shè)備判定所述當(dāng)前播放內(nèi)容不合法時，感知所述網(wǎng)絡(luò)媒體設(shè)備處于被威脅狀態(tài)，包括：

77、所述威脅感知設(shè)備判定所述當(dāng)前播放內(nèi)容不合法為圖像內(nèi)容不合法、高頻中心詞不合法、音頻不合法任一不合法；

78、記錄所述當(dāng)前播放內(nèi)容不合法次數(shù)，判斷所述當(dāng)前播放內(nèi)容不合法次數(shù)是否超過預(yù)設(shè)次數(shù)；

79、當(dāng)所述當(dāng)前播放內(nèi)容不合法次數(shù)超過預(yù)設(shè)次數(shù)時，認(rèn)定所述網(wǎng)絡(luò)媒體設(shè)備處于被威脅狀態(tài)。

80、本說明書還提供一種電子設(shè)備，其中，該電子設(shè)備包括：

81、處理器；以及，

82、存儲計算機可執(zhí)行指令的存儲器，所述可執(zhí)行指令在被執(zhí)行時使所述處理器執(zhí)行上述任一項方法。

83、本說明書還提供一種計算機可讀存儲介質(zhì)，其中，所述計算機可讀存儲介質(zhì)存儲一個或多個程序，所述一個或多個程序當(dāng)被處理器執(zhí)行時，實現(xiàn)上述任一項方法。

84、本發(fā)明中，通過分時段提取待播放內(nèi)容的數(shù)據(jù)特征，將其作為合法性的檢測基準(zhǔn)，使邊緣設(shè)備能夠全面感知圖像、文字、音頻三個維度的替換篡改等非法播放威脅。這種從播放結(jié)果直接判斷非法播放威脅的方式，無需深究具體技術(shù)手段，大大增強了威脅感知的直觀性和準(zhǔn)確性。此外，該方法采用了云端威脅監(jiān)測服務(wù)器與邊緣設(shè)備相結(jié)合的結(jié)構(gòu)，將耗時且算力要求高的數(shù)據(jù)特征提取工作交由云端處理，邊緣設(shè)備則專注于利用自身計算資源進行數(shù)據(jù)分析，有效減輕了服務(wù)端負(fù)擔(dān)。邊緣設(shè)備還具備隨機時間間隔發(fā)起威脅感知檢測任務(wù)的能力，并能動態(tài)調(diào)整檢測間隔，這不僅降低了總體計算量，還顯著提升了網(wǎng)絡(luò)安全系統(tǒng)的響應(yīng)速度，確保了威脅的及時發(fā)現(xiàn)與實時響應(yīng)。