【技術(shù)實(shí)現(xiàn)步驟摘要】
本專(zhuān)利技術(shù)涉及數(shù)據(jù)稽核，特別是一種基于元數(shù)據(jù)的物理數(shù)據(jù)模型質(zhì)量稽核方法及系統(tǒng)。
技術(shù)介紹
1、當(dāng)前，隨著大數(shù)據(jù)時(shí)代的到來(lái)和信息技術(shù)的迅猛發(fā)展，數(shù)據(jù)在企業(yè)決策和運(yùn)營(yíng)中的重要性日益凸顯，特別是在物理數(shù)據(jù)模型的構(gòu)建和管理過(guò)程中，保證數(shù)據(jù)模型的質(zhì)量對(duì)于提升系統(tǒng)穩(wěn)定性和數(shù)據(jù)一致性至關(guān)重要，然而，隨著數(shù)據(jù)量和復(fù)雜度的不斷增加，傳統(tǒng)的人工檢查方法已經(jīng)無(wú)法滿足高效和精準(zhǔn)的數(shù)據(jù)質(zhì)量審查需求，因此，基于元數(shù)據(jù)的自動(dòng)化數(shù)據(jù)質(zhì)量稽核方法逐漸成為企業(yè)數(shù)字化轉(zhuǎn)型中的關(guān)鍵技術(shù)。
2、目前，現(xiàn)有技術(shù)中，物理數(shù)據(jù)模型的質(zhì)量檢查存在諸多不足，包括審查規(guī)則不夠細(xì)化、檢查過(guò)程缺乏自動(dòng)化支持以及數(shù)據(jù)質(zhì)量跟蹤難度大等問(wèn)題，這些不足不僅導(dǎo)致了數(shù)據(jù)模型的錯(cuò)誤和不一致性，還增加了維護(hù)和更新的復(fù)雜性，針對(duì)這些問(wèn)題，本專(zhuān)利技術(shù)提出了一種基于元數(shù)據(jù)的物理數(shù)據(jù)模型質(zhì)量稽核方法，通過(guò)自動(dòng)化審查規(guī)則的創(chuàng)建、元數(shù)據(jù)的檢查和可視化跟蹤，實(shí)現(xiàn)了對(duì)物理數(shù)據(jù)模型質(zhì)量的全方位稽核，顯著提升了數(shù)據(jù)模型的可靠性和管理效率。
技術(shù)實(shí)現(xiàn)思路
1、鑒于現(xiàn)有的基于元數(shù)據(jù)的物理數(shù)據(jù)模型質(zhì)量稽核方法及系統(tǒng)中存在的問(wèn)題，提出了本專(zhuān)利技術(shù)。
2、因此，本專(zhuān)利技術(shù)的目的是提供一種基于元數(shù)據(jù)的物理數(shù)據(jù)模型質(zhì)量稽核方法及系統(tǒng)，針對(duì)現(xiàn)有技術(shù)中人工檢查不夠高效和數(shù)據(jù)質(zhì)量跟蹤困難的問(wèn)題，本專(zhuān)利技術(shù)采用基于元數(shù)據(jù)的自動(dòng)化審查規(guī)則創(chuàng)建、自動(dòng)化檢查任務(wù)生成和可視化跟蹤技術(shù)進(jìn)行解決。
3、為解決上述技術(shù)問(wèn)題，本專(zhuān)利技術(shù)提供如下技術(shù)方案：
4、第一
5、對(duì)獲取的元數(shù)據(jù)進(jìn)行檢查，生成物理數(shù)據(jù)模型質(zhì)量的審查報(bào)告，將生成的審查報(bào)告發(fā)送給對(duì)應(yīng)問(wèn)題模型的設(shè)計(jì)人員，完成物理數(shù)據(jù)模型質(zhì)量的更新；
6、記錄更新前后的審查報(bào)告，建立物理數(shù)據(jù)模型質(zhì)量的跟蹤報(bào)告，將物理數(shù)據(jù)模型質(zhì)量的跟蹤報(bào)告進(jìn)行可視化展示，構(gòu)建物理數(shù)據(jù)模型質(zhì)量的圖表分布情況，基于分布情況進(jìn)行審查。
7、作為本專(zhuān)利技術(shù)所述基于元數(shù)據(jù)的物理數(shù)據(jù)模型質(zhì)量稽核方法的一種優(yōu)選方案，其中：所述創(chuàng)建物理數(shù)據(jù)模型的質(zhì)量審查規(guī)則包括根據(jù)數(shù)據(jù)庫(kù)的執(zhí)行語(yǔ)言需求創(chuàng)建物理數(shù)據(jù)模型的質(zhì)量審查規(guī)則，所述質(zhì)量審查規(guī)則包括結(jié)構(gòu)完整性、數(shù)據(jù)一致性和性能優(yōu)化，系統(tǒng)自動(dòng)收集分析來(lái)自不同業(yè)務(wù)部門(mén)的需求輸入，計(jì)算需求輸入矩陣，所述需求輸入矩陣的具體計(jì)算公式為：
8、
9、其中，rij表示第i類(lèi)規(guī)則的第j項(xiàng)需求的權(quán)重，ωk表示k個(gè)業(yè)務(wù)部門(mén)的權(quán)重，nijk表示第k個(gè)業(yè)務(wù)部門(mén)對(duì)第i類(lèi)規(guī)則的第j項(xiàng)需求的評(píng)分。
10、作為本專(zhuān)利技術(shù)所述基于元數(shù)據(jù)的物理數(shù)據(jù)模型質(zhì)量稽核方法的一種優(yōu)選方案，其中：所述對(duì)審查規(guī)則的劃分結(jié)果進(jìn)行轉(zhuǎn)換包括根據(jù)不同的規(guī)則類(lèi)別和權(quán)重，系統(tǒng)自動(dòng)生成sql查詢(xún)的檢查腳本，基于檢查腳本生成的檢查任務(wù)，所述檢查任務(wù)包括結(jié)構(gòu)完整性檢查、數(shù)據(jù)一致性檢查和性能優(yōu)化檢查；
11、系統(tǒng)根據(jù)需求輸入矩陣結(jié)果，動(dòng)態(tài)生成檢查任務(wù)列表，所述檢查任務(wù)列表的具體計(jì)算公式為：
12、ts＝{tij|rij>threshold}
13、其中，ts表示滿足閾值條件的檢查任務(wù)集合，tij表示檢查任務(wù)，rij表示第i類(lèi)規(guī)則的第j項(xiàng)需求的權(quán)重，threshold表示預(yù)設(shè)的權(quán)重閾值；
14、所述獲取物理數(shù)據(jù)模型的元數(shù)據(jù)包括通過(guò)生成的檢查任務(wù)，系統(tǒng)自動(dòng)連接數(shù)據(jù)庫(kù)，執(zhí)行檢查任務(wù)，獲取物理數(shù)據(jù)模型的元數(shù)據(jù)；
15、系統(tǒng)根據(jù)生成的所述檢查任務(wù)列表，依次執(zhí)行各項(xiàng)任務(wù)，收集數(shù)據(jù)模型的元數(shù)據(jù)，具體收集元數(shù)據(jù)的具體計(jì)算公式為：
16、m＝{mi|mi∈execute(tij)}
17、其中，m表示獲取的元數(shù)據(jù)集合，mi表示元數(shù)據(jù)項(xiàng)，execute表示執(zhí)行檢查任務(wù)的函數(shù)，tij表示檢查任務(wù)。
18、作為本專(zhuān)利技術(shù)所述基于元數(shù)據(jù)的物理數(shù)據(jù)模型質(zhì)量稽核方法的一種優(yōu)選方案，其中：所述對(duì)獲取的元數(shù)據(jù)進(jìn)行檢查包括從數(shù)據(jù)庫(kù)中提取物理數(shù)據(jù)模型的元數(shù)據(jù)，根據(jù)不同的元數(shù)據(jù)類(lèi)型自定義元數(shù)據(jù)的字段信息，檢查字段信息中的結(jié)構(gòu)屬性；
19、若所述字段信息缺少主鍵，則將此時(shí)的字段信息標(biāo)記，記錄問(wèn)題，對(duì)記錄的問(wèn)題進(jìn)行優(yōu)化；
20、當(dāng)優(yōu)化過(guò)程中的冗余索引超過(guò)字段信息的預(yù)設(shè)標(biāo)準(zhǔn)時(shí)，則優(yōu)化后的字段信息不符合預(yù)定義的數(shù)據(jù)類(lèi)型規(guī)范，所述預(yù)設(shè)標(biāo)準(zhǔn)包括對(duì)記錄的問(wèn)題進(jìn)行異議，所述異議的具體步驟如下：
21、若所述字段信息之間的外鍵約束不滿足數(shù)據(jù)一致性檢查時(shí)，則記錄外鍵關(guān)系問(wèn)題，進(jìn)行標(biāo)記修復(fù)；
22、若所述字段信息的外鍵指向方向的主鍵不存在時(shí)，則記錄標(biāo)記修復(fù)過(guò)程，進(jìn)行數(shù)據(jù)清除。
23、作為本專(zhuān)利技術(shù)所述基于元數(shù)據(jù)的物理數(shù)據(jù)模型質(zhì)量稽核方法的一種優(yōu)選方案，其中：所述生成物理數(shù)據(jù)模型質(zhì)量的審查報(bào)告包括在完成物理數(shù)據(jù)模型的質(zhì)量檢查后，系統(tǒng)根據(jù)檢查結(jié)果建立不同等級(jí)的審查報(bào)告，根據(jù)物理數(shù)據(jù)模型所接受檢查的數(shù)量判斷所述審查報(bào)告的嚴(yán)重程度；
24、當(dāng)同一個(gè)設(shè)計(jì)人員負(fù)責(zé)n個(gè)問(wèn)題時(shí)，則所述審查報(bào)告根據(jù)記錄的問(wèn)題，設(shè)計(jì)人員信息進(jìn)行分配，所述設(shè)計(jì)人員信息進(jìn)行分配的具體計(jì)算公式為：
25、s＝{di|mi∈p(di)}
26、其中，s表示設(shè)計(jì)人員的分配結(jié)果，di表示設(shè)計(jì)人員，p(di)表示設(shè)計(jì)人員負(fù)責(zé)的問(wèn)題集合。
27、作為本專(zhuān)利技術(shù)所述基于元數(shù)據(jù)的物理數(shù)據(jù)模型質(zhì)量稽核方法的一種優(yōu)選方案，其中：所述完成物理數(shù)據(jù)模型質(zhì)量的更新包括根據(jù)設(shè)計(jì)人員收到的報(bào)告問(wèn)題，系統(tǒng)自動(dòng)檢查設(shè)計(jì)人員提交的更新數(shù)據(jù)模型，驗(yàn)證問(wèn)題是否已修復(fù)；
28、若檢測(cè)到問(wèn)題已修復(fù)，則系統(tǒng)更新審查報(bào)告狀態(tài)為已解決；
29、若檢測(cè)問(wèn)題未得到修復(fù)，記錄未修復(fù)原因，通知設(shè)計(jì)人員對(duì)修復(fù)的各項(xiàng)步驟進(jìn)行驗(yàn)證；
30、構(gòu)建多重閾值ti，對(duì)所述質(zhì)量審查規(guī)則進(jìn)行檢查，具體的檢查計(jì)算公式為：
31、ts＝{ti|ri>ti}
32、其中，ts表示通過(guò)驗(yàn)證的修復(fù)項(xiàng)集合，ti表示構(gòu)建的多重閾值，ri表示第i項(xiàng)修復(fù)的驗(yàn)證結(jié)果；
33、當(dāng)ri>ti時(shí)，則通過(guò)驗(yàn)證的修復(fù)項(xiàng)集合處于合格狀態(tài)；
34、當(dāng)ri≤ti時(shí)，則通過(guò)驗(yàn)證的修復(fù)項(xiàng)集合處于不合格狀態(tài)，此時(shí)，對(duì)結(jié)構(gòu)完整性、數(shù)據(jù)一致性和性能優(yōu)化進(jìn)行檢查；
35、所述對(duì)結(jié)構(gòu)完整性進(jìn)行檢查包括對(duì)結(jié)構(gòu)的表結(jié)構(gòu)、表字段類(lèi)型和約束條件進(jìn)行檢查；
36、具體對(duì)結(jié)構(gòu)完整性進(jìn)行檢查的具體計(jì)算公式為：
37、
38、其中，s表示結(jié)構(gòu)完整性得分，ωj表示第j項(xiàng)檢查的權(quán)重，cj表示結(jié)構(gòu)完整性檢查的合格變量；
39、當(dāng)cj≤s時(shí)，則結(jié)構(gòu)完整性通過(guò)，則記為合格；否則，當(dāng)cj>s時(shí)，此時(shí)記錄詳細(xì)問(wèn)題并通知設(shè)計(jì)人員；
40、所述數(shù)據(jù)一致性檢查包括將數(shù)據(jù)一致性得分與數(shù)據(jù)本文檔來(lái)自技高網(wǎng)...
【技術(shù)保護(hù)點(diǎn)】
1.一種基于元數(shù)據(jù)的物理數(shù)據(jù)模型質(zhì)量稽核方法，其特征在于：包括，
2.如權(quán)利要求1所述的基于元數(shù)據(jù)的物理數(shù)據(jù)模型質(zhì)量稽核方法，其特征在于：所述創(chuàng)建物理數(shù)據(jù)模型的質(zhì)量審查規(guī)則包括根據(jù)數(shù)據(jù)庫(kù)的執(zhí)行語(yǔ)言需求創(chuàng)建物理數(shù)據(jù)模型的質(zhì)量審查規(guī)則，所述質(zhì)量審查規(guī)則包括結(jié)構(gòu)完整性、數(shù)據(jù)一致性和性能優(yōu)化，系統(tǒng)自動(dòng)收集分析來(lái)自不同業(yè)務(wù)部門(mén)的需求輸入，計(jì)算需求輸入矩陣，所述需求輸入矩陣的具體計(jì)算公式為：
3.如權(quán)利要求2所述的基于元數(shù)據(jù)的物理數(shù)據(jù)模型質(zhì)量稽核方法，其特征在于：所述對(duì)審查規(guī)則的劃分結(jié)果進(jìn)行轉(zhuǎn)換包括根據(jù)不同的規(guī)則類(lèi)別和權(quán)重，系統(tǒng)自動(dòng)生成SQL查詢(xún)的檢查腳本，基于檢查腳本生成的檢查任務(wù)，所述檢查任務(wù)包括結(jié)構(gòu)完整性檢查、數(shù)據(jù)一致性檢查和性能優(yōu)化檢查；
4.如權(quán)利要求3所述的基于元數(shù)據(jù)的物理數(shù)據(jù)模型質(zhì)量稽核方法，其特征在于：所述對(duì)獲取的元數(shù)據(jù)進(jìn)行檢查包括從數(shù)據(jù)庫(kù)中提取物理數(shù)據(jù)模型的元數(shù)據(jù)，根據(jù)不同的元數(shù)據(jù)類(lèi)型自定義元數(shù)據(jù)的字段信息，檢查字段信息中的結(jié)構(gòu)屬性；
5.如權(quán)利要求4所述的基于元數(shù)據(jù)的物理數(shù)據(jù)模型質(zhì)量稽核方法，其特征在于：所述生成物理數(shù)據(jù)模型
6.如權(quán)利要求5所述的基于元數(shù)據(jù)的物理數(shù)據(jù)模型質(zhì)量稽核方法，其特征在于：所述完成物理數(shù)據(jù)模型質(zhì)量的更新包括根據(jù)設(shè)計(jì)人員收到的報(bào)告問(wèn)題，系統(tǒng)自動(dòng)檢查設(shè)計(jì)人員提交的更新數(shù)據(jù)模型，驗(yàn)證問(wèn)題是否已修復(fù)；
7.如權(quán)利要求6所述的基于元數(shù)據(jù)的物理數(shù)據(jù)模型質(zhì)量稽核方法，其特征在于：所述建立物理數(shù)據(jù)模型質(zhì)量的跟蹤報(bào)告包括系統(tǒng)對(duì)檢查任務(wù)的結(jié)果進(jìn)行綜合評(píng)估，生成修復(fù)后的跟蹤報(bào)告，具體修復(fù)的計(jì)算公式為：
8.一種基于元數(shù)據(jù)的物理數(shù)據(jù)模型質(zhì)量稽核系統(tǒng)，基于權(quán)利要求1～7任一所述的基于元數(shù)據(jù)的物理數(shù)據(jù)模型質(zhì)量稽核方法，其特征在于：包括，
9.一種計(jì)算機(jī)設(shè)備，包括存儲(chǔ)器和處理器，所述存儲(chǔ)器存儲(chǔ)有計(jì)算機(jī)程序，其特征在于：所述處理器執(zhí)行所述計(jì)算機(jī)程序時(shí)實(shí)現(xiàn)權(quán)利要求1～7任一所述的基于元數(shù)據(jù)的物理數(shù)據(jù)模型質(zhì)量稽核方法的步驟。
10.一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其上存儲(chǔ)有計(jì)算機(jī)程序，其特征在于：所述計(jì)算機(jī)程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)權(quán)利要求1～7任一所述的基于元數(shù)據(jù)的物理數(shù)據(jù)模型質(zhì)量稽核方法的步驟。
...【技術(shù)特征摘要】
1.一種基于元數(shù)據(jù)的物理數(shù)據(jù)模型質(zhì)量稽核方法，其特征在于：包括，
2.如權(quán)利要求1所述的基于元數(shù)據(jù)的物理數(shù)據(jù)模型質(zhì)量稽核方法，其特征在于：所述創(chuàng)建物理數(shù)據(jù)模型的質(zhì)量審查規(guī)則包括根據(jù)數(shù)據(jù)庫(kù)的執(zhí)行語(yǔ)言需求創(chuàng)建物理數(shù)據(jù)模型的質(zhì)量審查規(guī)則，所述質(zhì)量審查規(guī)則包括結(jié)構(gòu)完整性、數(shù)據(jù)一致性和性能優(yōu)化，系統(tǒng)自動(dòng)收集分析來(lái)自不同業(yè)務(wù)部門(mén)的需求輸入，計(jì)算需求輸入矩陣，所述需求輸入矩陣的具體計(jì)算公式為：
3.如權(quán)利要求2所述的基于元數(shù)據(jù)的物理數(shù)據(jù)模型質(zhì)量稽核方法，其特征在于：所述對(duì)審查規(guī)則的劃分結(jié)果進(jìn)行轉(zhuǎn)換包括根據(jù)不同的規(guī)則類(lèi)別和權(quán)重，系統(tǒng)自動(dòng)生成sql查詢(xún)的檢查腳本，基于檢查腳本生成的檢查任務(wù)，所述檢查任務(wù)包括結(jié)構(gòu)完整性檢查、數(shù)據(jù)一致性檢查和性能優(yōu)化檢查；
4.如權(quán)利要求3所述的基于元數(shù)據(jù)的物理數(shù)據(jù)模型質(zhì)量稽核方法，其特征在于：所述對(duì)獲取的元數(shù)據(jù)進(jìn)行檢查包括從數(shù)據(jù)庫(kù)中提取物理數(shù)據(jù)模型的元數(shù)據(jù)，根據(jù)不同的元數(shù)據(jù)類(lèi)型自定義元數(shù)據(jù)的字段信息，檢查字段信息中的結(jié)構(gòu)屬性；
5.如權(quán)利要求4所述的基于元數(shù)據(jù)的物理數(shù)據(jù)模型質(zhì)量稽核方法，其特征在于：所述生成物理數(shù)據(jù)模型質(zhì)量的審查報(bào)告包括在完成物理數(shù)據(jù)模型的質(zhì)量...
【專(zhuān)利技術(shù)屬性】
技術(shù)研發(fā)人員：高俊，楊加?xùn)|，常重喜，曹雷濤，劉曉紅，徐廣學(xué)，劉華，柯海鵬，楊強(qiáng)強(qiáng)，
申請(qǐng)(專(zhuān)利權(quán))人：華能核能技術(shù)研究院有限公司，
類(lèi)型：發(fā)明
國(guó)別省市：
還沒(méi)有人留言評(píng)論。發(fā)表了對(duì)其他瀏覽者有用的留言會(huì)獲得科技券。