據(jù)庫中臺賬數(shù)據(jù)標(biāo)準(zhǔn)規(guī)范表進(jìn)行對比。先判斷是否為空,如果為空則是必填數(shù)據(jù),需存入錯誤信息數(shù)組;不為空則必填數(shù)據(jù)不用檢測。完成一個臺賬數(shù)據(jù)的質(zhì)量檢測后,對下一個臺賬數(shù)據(jù)進(jìn)行質(zhì)量檢測,最后將結(jié)果保存、統(tǒng)計、匯總,關(guān)鍵代碼如下：

//把結(jié)果數(shù)組中的xml格式字符串轉(zhuǎn)為SimpleXML對象

$result = simplexml_load_string($result[‘Get’.$type.’AccountListResult’]);

$element = $result->$type.’InfoList’->$type.’Account’;

$element = $this->formatSimpleXML($element); //規(guī)范格式方便質(zhì)量檢測

$scheme = M(“sy_scheme”);//將數(shù)據(jù)規(guī)范表實(shí)例化

……

//檢測判斷

if(empty($data[0])){//沒有填數(shù)據(jù),不再執(zhí)行check_type

if($is_fill){

$array = $check->addErrorArray($type,$account_id, $label,

$scheme[$i][‘para_name’],$data,0,’為空',$array); //存入錯誤信息數(shù)組}}

elseif($check_type){//判斷是否填寫正確

settype($data,”string”);

$array = $check->checkType($check_type,$data,$type,$account_id,$scheme[$i],$array);}

else//不是必填項(xiàng)為空或填寫正確

continue;

}

return $array;

}

在CheckController中用checkType函數(shù)判斷是否填寫正確,分為幾種標(biāo)準(zhǔn)規(guī)范：無其他要求,有閾值,不能有中文,必須是中文,判斷日期,不帶單位,匹配標(biāo)準(zhǔn)格式,匹配生產(chǎn)廠家編碼,匹配部門編碼。

4.3 實(shí)驗(yàn)結(jié)果與分析

在臺賬數(shù)據(jù)質(zhì)量檢測功能界面（見圖4）,設(shè)計了用戶選擇臺賬數(shù)據(jù)類型的選項(xiàng)卡,在Web服務(wù)地址輸入框,點(diǎn)擊“開始檢測”按鈕,對相應(yīng)的臺賬數(shù)據(jù)進(jìn)行檢測,檢測出的異常數(shù)據(jù)顯示在表格中（為空的是白色,錯誤的是紅色）;點(diǎn)擊“缺失數(shù)據(jù)”按鈕只顯示錯誤類型為空的數(shù)據(jù),點(diǎn)擊“錯誤數(shù)據(jù)”按鈕顯示錯誤類型為填錯的數(shù)據(jù)。

圖4 臺賬數(shù)據(jù)質(zhì)量檢測界面Fig.4 Accountdata quality detection interface

點(diǎn)擊“生成報表”,對異常數(shù)據(jù)進(jìn)行統(tǒng)計,生成的臺賬數(shù)據(jù)檢測報表如圖5所示。

圖5 臺賬數(shù)據(jù)檢測報表Fig.5 Account data detection report

 5 數(shù)據(jù)質(zhì)量提升對策

1）集中對PMS數(shù)據(jù)錄入人員展開培訓(xùn),重點(diǎn)關(guān)注PMS系統(tǒng)中對輸入規(guī)范沒有明確要求的相關(guān)屬性,將培訓(xùn)考核結(jié)果與后續(xù)工作完成質(zhì)量同時納入日常工作考核范圍,提升后續(xù)工作效率。

2）PMS系統(tǒng)根據(jù)各類數(shù)據(jù)的格式要求,明確數(shù)據(jù)填寫規(guī)范,包括填寫內(nèi)容的格式、上下限、統(tǒng)一命名及編碼規(guī)范等,同時還可設(shè)置數(shù)據(jù)過濾功能,在數(shù)據(jù)入庫前進(jìn)行多次問題反饋與整改。

3）根據(jù)不同類型數(shù)據(jù)的需求,在系統(tǒng)內(nèi)添加部分?jǐn)?shù)據(jù)修復(fù)與缺失數(shù)據(jù)填充的功能,例如字段要求為不可添加單位,則可以自動將錯誤值后綴字母部分去除;缺失字段若有填寫正確的關(guān)聯(lián)字段,可通過固定關(guān)聯(lián)關(guān)系進(jìn)行填補(bǔ)。需要注意的是,在數(shù)據(jù)修復(fù)與填補(bǔ)功能準(zhǔn)確度不夠高的情況下,需要生成報表進(jìn)行人工確認(rèn)后才可對實(shí)際數(shù)據(jù)進(jìn)行操作。

 6 結(jié)語

隨著國家電網(wǎng)公司臺賬數(shù)據(jù)量的日益增加,臺賬數(shù)據(jù)質(zhì)量的檢測耗時變得越來越長,本文設(shè)計開發(fā)了一套PMS臺賬數(shù)據(jù)服務(wù)及數(shù)據(jù)質(zhì)量檢測軟件,用自動化的檢測替代人工檢查方式,提高供電企業(yè)數(shù)據(jù)質(zhì)量檢測工作的檢測速度,解決臺賬數(shù)據(jù)質(zhì)量檢測難題,能夠?qū)⑷笔?shù)據(jù)和錯誤數(shù)據(jù)成功并精確地檢測出來。系統(tǒng)還需要進(jìn)一步的完善,在提高檢測性能的同時,補(bǔ)充對更多類型臺賬數(shù)據(jù)檢測的功能,最終實(shí)現(xiàn)系統(tǒng)功能完備、操作便捷的目標(biāo)。

(編輯:張欽芝)

參考文獻(xiàn)

[1] 張玉環(huán), 李德超, 趙輝. PMS系統(tǒng)設(shè)備臺賬數(shù)據(jù)準(zhǔn)確性核查方法研究[J]. 現(xiàn)代工業(yè)經(jīng)濟(jì)和信息化, 2016, 6(22): 99-100.

ZHANG Yu-huan, LI De-chao, ZHAO Hui.Study on checking method for data veracity of PMS system’s equipment accounts[J]. Modern Industrial Economy and Informationization, 2016, 6(22): 99-100.

[2] 包陽, 齊璇, 李海龍. 大型軟件系統(tǒng)數(shù)據(jù)質(zhì)量問題研究[J]. 計算機(jī)工程與設(shè)計, 2011, 32(3): 963-967, 987.

BAO Yang, QI Xuan, LI Hai-long.Research on data quality of large-scale software system[J]. Computer Engineering and Design, 2011, 32(3): 963-967, 987.

[3] 孫鵬, 馬素霞. 基于IEC 61970標(biāo)準(zhǔn)及Web服務(wù)的電能質(zhì)量異常數(shù)據(jù)檢測系統(tǒng)研究[J]. 電力信息與通信技術(shù), 2015, 13(6): 87-91.

SUN Peng, MA Su-xia.Research on the power quality outlier data detection system based on IEC 61970 and web service[J]. Electric Power Information and Communication Technology, 2015, 13(6): 87-91.

[4] 趙秀平, 吳爽, 馬素霞. 電能質(zhì)量基礎(chǔ)數(shù)據(jù)服務(wù)質(zhì)量檢測系統(tǒng)研究[J]. 電力信息與通信技術(shù), 2016, 14(2): 113-118.

ZHAO Xiu-ping, WU Shuang, MA Su-xia.Research on power quality basic data service quality detection system[J]. Electric Power Information and Communication Technology, 2016, 14(2): 113-118.

[5] 趙曉鋒, 周慶捷, 王志利, 等. PMS實(shí)用化分析評價體系和數(shù)據(jù)質(zhì)量提升的研究[J]. 電力信息與通信技術(shù), 2015, 13(7): 101-106.

ZHAO Xiao-feng, ZHOU Qing-jie, WANG Zhi-li, et al.Research on the PMS practical analysis and evaluation system and the improvement of data quality[J]. Electric Power Information and Communication Technology, 2015, 13(7): 101-106.

[6] 欒富君. 電能質(zhì)量基礎(chǔ)數(shù)據(jù)服務(wù)及檢測系統(tǒng)研究[D]. 北京: 華北電力大學(xué), 2014.

[7] 陳孟婕. 數(shù)據(jù)質(zhì)量管理與數(shù)據(jù)清洗技術(shù)的研究與應(yīng)用[D]. 北京: 北京郵電大學(xué), 2013.

[8] 張亮. 電力調(diào)度數(shù)據(jù)中心數(shù)據(jù)質(zhì)量問題研究[J]. 華東電力, 2009, 38(3): 403-406.

ZHANG Liang.Research on data quality for electric power dispatch data centers[J]. East China Electric Power, 2009, 38(3): 403-406.

[9] 王晶. 電力系統(tǒng)異常數(shù)據(jù)檢測辨識方法綜述[J]. 電力與能源, 2015, 36(6): 813-817.

WANG Jing.A survey on power system bad data detection and identification[J]. Power & Energy, 2015,36(6): 813-817.

[10] 楊沖. 電能質(zhì)量數(shù)據(jù)服務(wù)檢測系統(tǒng)研究[D]. 北京: 華北電力大學(xué), 2015.

[11] 朱靜然. 多系統(tǒng)GNSS實(shí)時數(shù)據(jù)質(zhì)量分析及軟件實(shí)現(xiàn)[D]. 南京: 東南大學(xué), 2015.

[12] 凌云. 數(shù)據(jù)質(zhì)量評估方法研究[D]. 成都: 四川師范大學(xué), 2015.