一種實現配電網數據在線異步采集智能挖掘的方法
【專利摘要】一種實現配電網數據在線異步采集智能挖掘的方法，步驟為:1)對配電網數據構建異步數據采集規約標準；2)對步驟1)采集的數據進行數據清洗；3)對清洗后的數據進行智能挖掘；4)對步驟3)處理后的數據進行業務分類。它可以對配電網運行的數據進行采集、清洗、挖掘、處理與展現，實現配電網數據的統一采集與分析。
【專利說明】
一種實現配電網數據在線異步采集智能挖掘的方法
技術領域
[0001]本發明涉及配電網數據處理技術領域，特別是一種配電網數據采集、挖掘方法。
【背景技術】
[0002]配電網是由架空線路、電纜、桿塔、配電變壓器、隔離開關、無功補償器及一些附屬設施等組成的，在電力網中起重要分配電能作用的網絡。
[0003]目前配電網的數據采集分為信息化系統采集與終端規約采集，標準化業務構建的過程中由于采集規約和采集條件的制約與業務應用針對指標數據應用過程中產生部分采集數據冗余錯誤，導致在數據應用過程中造成系統資源的浪費，尤其數據挖掘過程中，造成重復工作

【發明內容】

[0004]本發明的目的就是提供一種實現配電網數據在線異步采集智能挖掘的方法，它可以對配電網運行的數據進行采集、清洗、挖掘、處理與展現，實現配電網數據的統一采集與分析。
[0005]本發明的目的是通過這樣的技術方案實現的，具體步驟如下:
[0006]I)對配電網數據構建異步數據采集規約標準；
[0007]2)對步驟I)采集的數據進行數據清洗；
[0008]3)對清洗后的數據進行智能挖掘；
[0009]4)對步驟3)處理后的數據進行業務分類；
[0010]5)對數據進行分析，并完成結果展現。
[0011 ]進一步，步驟I)中所述構建異步數據采集規約標準的具體方法如下:
[0012]構建數據分類智能采集模型，依據配電網業務數據分類與指標對應采集規約，構建采集觸發規則;采用基礎業務作為指標應用的關鍵因素，構建引擎式的解析內核;根據指標標識、數據維度等進行規約匹配，實現數據的統一采集，并對采集數據加入標識。
[0013]進一步，步驟2)中所述數據清洗的具體方法如下:
[0014]依據業務邏輯對包含標識的采集數據進行整理分析，根據業務指標的業務邏輯定義，以指標作為主題構建相關運行數據的集合，所述數據集合有可能從多個業務系統中抽取而來，且包含歷史數據，針對其數據進行沖突分析、剔除重復、過濾錯誤，提供完整可供分析應用的清洗后數據。
[0015]進一步，步驟3)中所述智能挖掘的具體方法如下:
[0016]將清洗后數據應用多維度模式進行數據準備、規律尋找和規律表示，構建數據挖掘模型;通過聚類的模式進行數據集劃分應用，分別對數據集中的數據指標進行指標關聯分析、各類聚類分析、配電網數據運行趨勢分析、指標運行異常分析和數據邏輯關系變化演變分析，進行深層次的數據分類挖掘，構建數據挖掘結果集。
[0017]進一步，步驟4)中所述業務分類的具體方法如下:
[0018]根據業務對數據挖掘結果集進行業務分類，分別設定管理與技術兩種分類，進行數據分類處理，建立相關分類處理定義，進行有效識別，智能分類批量處理。
[0019]進一步，步驟5)中所述完成結果展現的具體方法如下:
[0020]根據個性化業務需求，建立差異化模型的比對，對現場業務需求進行定制化分析結果展現。
[0021]由于采用了上述技術方案，本發明具有如下的優點:
[0022]本發明能夠在配電網數據統一采集方面提高采集效率，通過構建的規則建立采集標準，提升配電網運行數據采集質量;采用智能挖掘技術，在數據校驗分析過程中，能夠以配電網業務邏輯為主，實現配電網各種數據的有效組織和信息檢索，提高分析效率。
[0023]本發明的其他優點、目標和特征在某種程度上將在隨后的說明書中進行闡述，并且在某種程度上，基于對下文的考察研究對本領域技術人員而言將是顯而易見的，或者可以從本發明的實踐中得到教導。本發明的目標和其他優點可以通過下面的說明書和權利要求書來實現和獲得。
【附圖說明】
[0024]本發明的【附圖說明】如下。
[0025]圖1為本發明的流程示意圖；
[0026]圖2為數據挖掘流程示意圖。
【具體實施方式】
[0027]下面結合附圖和實施例對本發明作進一步說明。
[0028]—種實現配電網數據在線異步采集智能挖掘的方法，為構建異步數據采集規約標準、建立數據清洗池、數據智能挖掘、業務分類處理數據和即席分析5步。
[0029]構建異步數據采集規約標準，主要是指建立采集數據的標準，包括配電網電氣設備，主要指變壓器、電抗器、電容器、配電箱、斷路器、互感器、避雷器、輸電線路、電力電纜、接地裝置、發電機、調相機、電動機、封閉母線、開關等的基礎信息與相關運行指標，如線損率、有功功率、無功功率、電壓、電流等的運行數據，以及涉及生產、運行、檢修、營銷等的業務類型，對其進行異步分類，依次進行指標集數據對應其采集規約，如IEC61850、IEC61970、376.l、104、Web Services、總線等的指標關系化分類定制，將運行數據與基礎數據進行異步對應，實現異步數據智能化采集
[0030]建立數據清洗池，在數據清洗時定義指標數據業務維度，如對線損指標數據建立以理論線損/對時線損為統計方式、與日/月/季/年統計周期相結合的規則，以及常態數據趨勢狀態位監測指標，針對指標數據進行采集數據的沖突分析，通過不同模式系統采集的指標數據的生命周期，篩選完成指標條件選擇，刪除無效或錯誤數據，完成數據清洗。
[0031]數據智能挖掘，按照指標特性，有針對性的對單一指標進行深入挖掘分析，通過聚類分析對指標進行分類，通過k-means算法與業務進行融合，將指標作為對象，通過數據周期、環比動態趨勢對指標進行聚類鉆取分析，獲取數據指標業務分類基礎上的數據分類，根據趨勢動態分析擬合出數據波動幅度，分析運行數據異常情況，之后建立模型和假設modeland hypothesis條件，分別加載業務與指標進行多重條件假設，進行數據深入分段迭代挖掘，并重新加載業務條件進行測試和驗證挖掘結果。
[0032]數據處理，充分利用數據庫技術進行數據管理和處理，設定管理與技術分類，如配電網配電臺區更換配變型號等設定為管理類、三相不平衡調節等設定為技術類，進行數據差異化處理，分別建立對應的應用分類模型，進行數據處理。
[0033]業務應用分析，通過場景化分析應用，應用數據進行數據擬合趨勢預測，提供分析決策依據。
[0034]最后說明的是，以上實施例僅用以說明本發明的技術方案而非限制，盡管參照較佳實施例對本發明進行了詳細說明，本領域的普通技術人員應當理解，可以對本發明的技術方案進行修改或者等同替換，而不脫離本技術方案的宗旨和范圍，其均應涵蓋在本發明的權利要求范圍當中。
【主權項】
1.一種實現配電網數據在線異步采集智能挖掘的方法，其特征在于，具體步驟如下: 1)對配電網數據構建異步數據采集規約標準； 2)對步驟I)采集的數據進行數據清洗； 3)對清洗后的數據進行智能挖掘； 4)對步驟3)處理后的數據進行業務分類； 5)對數據進行分析，并完成結果展現。2.如權利要求1所述的實現配電網數據在線異步采集智能挖掘的方法，其特征在于，步驟I)中所述構建異步數據采集規約標準的具體方法如下: 構建數據分類智能采集模型，依據配電網業務數據分類與指標對應采集規約，構建采集觸發規則;采用基礎業務作為指標應用的關鍵因素，構建引擎式的解析內核;根據指標標識、數據維度等進行規約匹配，實現數據的統一采集，并對采集數據加入標識。3.如權利要求2所述的實現配電網數據在線異步采集智能挖掘的方法，其特征在于，步驟2)中所述數據清洗的具體方法如下: 依據業務邏輯對包含標識的采集數據進行整理分析，根據業務指標的業務邏輯定義，以指標作為主題構建相關運行數據的集合，所述數據集合有可能從多個業務系統中抽取而來，且包含歷史數據，針對其數據進行沖突分析、剔除重復、過濾錯誤，提供完整可供分析應用的清洗后數據。4.如權利要求3所述的實現配電網數據在線異步采集智能挖掘的方法，其特征在于，步驟3)中所述智能挖掘的具體方法如下: 將清洗后數據應用多維度模式進行數據準備、規律尋找和規律表示，構建數據挖掘模型;通過聚類的模式進行數據集劃分應用，分別對數據集中的數據指標進行指標關聯分析、各類聚類分析、配電網數據運行趨勢分析、指標運行異常分析和數據邏輯關系變化演變分析，進行深層次的數據分類挖掘，構建數據挖掘結果集。5.如權利要求4所述的實現配電網數據在線異步采集智能挖掘的方法，其特征在于，步驟4)中所述業務分類的具體方法如下: 根據業務對數據挖掘結果集進行業務分類，分別設定管理與技術兩種分類，進行數據分類處理，建立相關分類處理定義，進行有效識別，智能分類批量處理。6.如權利要求5所述的實現配電網數據在線異步采集智能挖掘的方法，其特征在于，步驟5)中所述完成結果展現的具體方法如下: 根據個性化業務需求，建立差異化模型的比對，對現場業務需求進行定制化分析結果展現。
【文檔編號】G06K9/62GK105930424SQ201610243960
【公開日】2016年9月7日
【申請日】2016年4月19日
【發明人】歐林, 張友強, 李 杰, 黃飛, 陳濤, 楊紅磊, 段祥駿, 馮德志, 李運碩, 王金麗, 方橫福, 王利, 杜銀波, 夏磊, 孟憲, 熊偉, 劉祖建, 余紅欣, 鐘加勇, 王洪彬, 趙志偉, 魏甦, 魏燕, 何燕, 何荷
【申請人】國網重慶市電力公司電力科學研究院, 中國電力科學研究院, 國家電網公司