本發(fā)明涉及數(shù)據(jù)分析,尤其涉及一種自動(dòng)監(jiān)測(cè)數(shù)據(jù)智能審核方法。
背景技術(shù):
1、隨著信息技術(shù)的快速發(fā)展,人工監(jiān)測(cè)數(shù)據(jù)逐漸被自動(dòng)檢測(cè)數(shù)據(jù)所替代,這些數(shù)據(jù)對(duì)于企業(yè)的運(yùn)營(yíng)管理和決策制定至關(guān)重要。為了確保數(shù)據(jù)的質(zhì)量,數(shù)據(jù)審核變得越來(lái)越重要。然而,現(xiàn)有的數(shù)據(jù)審核技術(shù)面臨著諸多挑戰(zhàn)。
2、現(xiàn)有的審核方法規(guī)則依賴(lài)性強(qiáng),需要人工進(jìn)行規(guī)則的設(shè)定,耗時(shí)較長(zhǎng),不能適應(yīng)所有的場(chǎng)景;并且現(xiàn)有方法的適應(yīng)能力較差、智能化程度低,在一些數(shù)據(jù)環(huán)境快速變化的情況下很難適應(yīng),不能隨著時(shí)間和數(shù)據(jù)的變化而不斷改進(jìn)。在解決這些問(wèn)題時(shí),高質(zhì)量的訓(xùn)練數(shù)據(jù)對(duì)構(gòu)建準(zhǔn)確、可靠、智能的審核方法尤為重要,但在實(shí)際應(yīng)用中高質(zhì)量的數(shù)據(jù)較難獲?。欢以趯?duì)于某些應(yīng)用場(chǎng)景來(lái)說(shuō)數(shù)據(jù)審核要在極端的時(shí)間內(nèi),需要實(shí)現(xiàn)實(shí)時(shí)性審核的要求。
3、綜上所述,現(xiàn)有技術(shù)在數(shù)據(jù)審核領(lǐng)域存在明顯的局限性,尤其是難以滿(mǎn)足日益增長(zhǎng)的數(shù)據(jù)量和多樣化的數(shù)據(jù)類(lèi)型的需求。因此,開(kāi)發(fā)一種能夠克服上述問(wèn)題的新一代自動(dòng)監(jiān)測(cè)數(shù)據(jù)智能審核技術(shù)方法顯得尤為迫切。
技術(shù)實(shí)現(xiàn)思路
1、本發(fā)明的目的在于提供一種自動(dòng)監(jiān)測(cè)數(shù)據(jù)智能審核方法,旨在解決現(xiàn)有技術(shù)在數(shù)據(jù)審核領(lǐng)域,難以滿(mǎn)足日益增長(zhǎng)的數(shù)據(jù)量和多樣化的數(shù)據(jù)類(lèi)型的需求的問(wèn)題。
2、為實(shí)現(xiàn)上述目的,本發(fā)明提供了一種自動(dòng)監(jiān)測(cè)數(shù)據(jù)智能審核方法,包括以下步驟;
3、對(duì)多個(gè)數(shù)據(jù)源實(shí)時(shí)或間斷性采集多源數(shù)據(jù);
4、對(duì)所述多源數(shù)據(jù)進(jìn)行預(yù)處理,并進(jìn)行數(shù)據(jù)自檢;
5、對(duì)待審核數(shù)據(jù)和歷史數(shù)據(jù)進(jìn)行特征提取,并制定相應(yīng)的審核規(guī)則;
6、基于所述審核規(guī)則對(duì)預(yù)處理后的多源數(shù)據(jù)進(jìn)行智能審核。
7、其中,所述多源數(shù)據(jù)包括自動(dòng)監(jiān)測(cè)的資源數(shù)據(jù)、系統(tǒng)配置數(shù)據(jù)、模型性能數(shù)據(jù)和工作日志數(shù)據(jù)。
8、其中,所述對(duì)所述多源數(shù)據(jù)進(jìn)行預(yù)處理,并進(jìn)行數(shù)據(jù)自檢的具體方式:
9、對(duì)所述多源數(shù)據(jù)的格式和類(lèi)型進(jìn)行統(tǒng)一轉(zhuǎn)換,得到統(tǒng)一數(shù)據(jù);
10、對(duì)所述統(tǒng)一數(shù)據(jù)進(jìn)行數(shù)據(jù)自檢;
11、對(duì)所述統(tǒng)一數(shù)據(jù)通過(guò)修改值上下一段數(shù)據(jù)的趨勢(shì)進(jìn)行填補(bǔ)該值。
12、其中,所述對(duì)待審核數(shù)據(jù)和歷史數(shù)據(jù)進(jìn)行特征提取,并制定相應(yīng)的審核規(guī)則的具體方式:
13、對(duì)待審核數(shù)據(jù)及點(diǎn)位上的歷史數(shù)據(jù)進(jìn)行數(shù)據(jù)特征提取,并將審核數(shù)據(jù)和歷史數(shù)據(jù)進(jìn)行一致性檢驗(yàn);
14、通過(guò)文獻(xiàn)調(diào)研、實(shí)際狀況及歷史數(shù)據(jù)多種因素對(duì)所述待審核數(shù)據(jù)設(shè)置審核規(guī)則。
15、其中,所述基于所述審核規(guī)則對(duì)預(yù)處理后的多源數(shù)據(jù)進(jìn)行智能審核的具體方式:
16、對(duì)基于歷史數(shù)據(jù)特征的規(guī)則和自定義的規(guī)則進(jìn)行分類(lèi),劃分為結(jié)構(gòu)化規(guī)則和非結(jié)構(gòu)化規(guī)則,并輸入;
17、基于決策樹(shù)對(duì)待審核數(shù)據(jù)進(jìn)行規(guī)則識(shí)別,選擇智能審核的規(guī)則進(jìn)行審核,得到審核結(jié)果;
18、基于所述審核結(jié)果,計(jì)算正常數(shù)據(jù)的占比,進(jìn)行可視化輸出,對(duì)所述審核結(jié)果進(jìn)行審查。
19、本發(fā)明的一種自動(dòng)監(jiān)測(cè)數(shù)據(jù)智能審核方法,對(duì)多個(gè)數(shù)據(jù)源實(shí)時(shí)或間斷性采集多源數(shù)據(jù);對(duì)所述多源數(shù)據(jù)進(jìn)行預(yù)處理,并進(jìn)行數(shù)據(jù)自檢;對(duì)待審核數(shù)據(jù)和歷史數(shù)據(jù)進(jìn)行特征提取,并制定相應(yīng)的審核規(guī)則;基于所述審核規(guī)則對(duì)預(yù)處理后的多源數(shù)據(jù)進(jìn)行智能審核,該方法通過(guò)自然語(yǔ)言處理技術(shù),并結(jié)合人為的干預(yù),能夠較好的提高數(shù)據(jù)審核的準(zhǔn)確性和效率,減少某些主客觀因素的影響,可以增強(qiáng)對(duì)多源數(shù)據(jù)的審核能力。通過(guò)引入決策機(jī)制和自我優(yōu)化機(jī)制,可以在實(shí)際應(yīng)用過(guò)程中不斷調(diào)整和優(yōu)化審核策略,適應(yīng)不斷變化的數(shù)據(jù)環(huán)境。該方法可以減少大規(guī)模的數(shù)據(jù)和復(fù)雜的數(shù)據(jù)類(lèi)型導(dǎo)致人工和時(shí)間成本過(guò)高的問(wèn)題,并應(yīng)對(duì)較復(fù)雜的應(yīng)用場(chǎng)景,具有較好的適應(yīng)性和安全性,通過(guò)智能審核技術(shù)能夠?qū)崿F(xiàn)對(duì)大規(guī)模數(shù)據(jù)進(jìn)行快速、準(zhǔn)確的處理,實(shí)現(xiàn)實(shí)時(shí)性的審核,提高審核的效率和準(zhǔn)確性,降低人工和時(shí)間成本,提高整體的經(jīng)濟(jì)效益,可實(shí)現(xiàn)自我優(yōu)化功能,根據(jù)新數(shù)據(jù)和用戶(hù)的反饋情況,不斷優(yōu)化審核策略適應(yīng)環(huán)境的變化,該方法還提供了靈活的規(guī)則設(shè)置,滿(mǎn)足個(gè)性化的審核需求,解決了現(xiàn)有技術(shù)在數(shù)據(jù)審核領(lǐng)域,難以滿(mǎn)足日益增長(zhǎng)的數(shù)據(jù)量和多樣化的數(shù)據(jù)類(lèi)型的需求的問(wèn)題。
1.一種自動(dòng)監(jiān)測(cè)數(shù)據(jù)智能審核方法,其特征在于,包括以下步驟;
2.如權(quán)利要求1所述的自動(dòng)監(jiān)測(cè)數(shù)據(jù)智能審核方法,其特征在于;
3.如權(quán)利要求1所述的自動(dòng)監(jiān)測(cè)數(shù)據(jù)智能審核方法,其特征在于;
4.如權(quán)利要求1所述的自動(dòng)監(jiān)測(cè)數(shù)據(jù)智能審核方法,其特征在于;
5.如權(quán)利要求1所述的自動(dòng)監(jiān)測(cè)數(shù)據(jù)智能審核方法,其特征在于;