本書以電網大數(shù)據(jù)標準化為主線,以電網大數(shù)據(jù)全生命周期管理過程為載體,重點闡述了電網大數(shù)據(jù)全生命周期管理的大數(shù)據(jù)處理技術,包括電網大數(shù)據(jù)采集技術、電網大數(shù)據(jù)存儲技術、電網大數(shù)據(jù)融合技術、電網大數(shù)據(jù)分析與挖掘技術、電網大數(shù)據(jù)可視化技術、電網大數(shù)據(jù)歸檔與銷毀技術以及電網大數(shù)據(jù)安全與隱私保護等內容。全書在介紹技術的同時,輔以大量的應用案例,以體現(xiàn)大數(shù)據(jù)的各種理論、技術和方法在電力行業(yè)所取得的成果。
本書可作為電網技術相關人員的參考書。
隨著智能電網發(fā)展進程的不斷推進,電網規(guī)模和數(shù)據(jù)采集終端數(shù)量不斷增大,電網大數(shù)據(jù)呈現(xiàn)出爆炸式的增長態(tài)勢,能否高效處理這些電網數(shù)據(jù)已成為電力行業(yè)面臨的巨大挑戰(zhàn)之一。電網大數(shù)據(jù)涉及電力生產和電力服務的各個環(huán)節(jié),形成了多源、異構、多維、多形式的電力數(shù)據(jù)資源,這些多源異構數(shù)據(jù)的融合是實現(xiàn)電網大數(shù)據(jù)價值挖掘的基礎。
本書以電網大數(shù)據(jù)全生命周期管理過程為研究對象,從分析電網大數(shù)據(jù)的特征入手,以數(shù)據(jù)質量為重點,以數(shù)據(jù)標準化為主線,對電網大數(shù)據(jù)全生命周期管理中各個階段所采用的核心技術進行了梳理,總結出目前電網大數(shù)據(jù)全生命周期管理中所存在的問題,從技術的角度提出適合智能電網數(shù)據(jù)信息處理的整體框架,形成一套具有統(tǒng)一的數(shù)據(jù)標準化方法和高數(shù)據(jù)質量的、支撐大數(shù)據(jù)全生命周期過程的核心技術體系。
全書共9章,其中第1章主要介紹了國家大數(shù)據(jù)和國家電網大數(shù)據(jù)背景、國家大數(shù)據(jù)和國家電網大數(shù)據(jù)發(fā)展戰(zhàn)略及能源行業(yè)的數(shù)字化革命,并在此基礎上闡述了本書的研究意義及主要研究內容;第2章介紹電網大數(shù)據(jù)全生命周期管理體系;第3~9章分別介紹電網大數(shù)據(jù)采集技術、電網大數(shù)據(jù)存儲技術、電網大數(shù)據(jù)融合技術、電網大數(shù)據(jù)分析與挖掘技術、電網大數(shù)據(jù)可視化技術、電網大數(shù)據(jù)歸檔與銷毀技術及電網大數(shù)據(jù)安全與隱私保護技術。
在編寫過程中,編者參閱了國內外的諸多專著及論文文獻,在此對文獻的作者們表示誠摯的謝意。由于編者水平有限,書中的錯誤和不當之處在所難免,懇請讀者在閱讀本書后提出寶貴的意見,以便后期改正。
編者
2020年9月
第1章引言1
1.1項目背景及意義1
1.1.1國家大數(shù)據(jù)背景1
1.1.2國家電網大數(shù)據(jù)背景2
1.2項目的戰(zhàn)略意義3
1.2.1國家大數(shù)據(jù)發(fā)展戰(zhàn)略3
1.2.2國家電網最新發(fā)展戰(zhàn)略——“三型兩網”4
1.2.3能源行業(yè)的數(shù)字化革命7
1.3研究意義及主要研究內容8
1.3.1研究意義8
1.3.2主要研究內容9
第2章電網大數(shù)據(jù)全生命周期管理體系13
2.1數(shù)據(jù)全生命周期管理的內涵13
2.1.1數(shù)據(jù)資產類別13
2.1.2數(shù)據(jù)資產管理內容14
2.2電網大數(shù)據(jù)全生命周期管理現(xiàn)狀17
2.3電網大數(shù)據(jù)全生命周期管理建設原則與目標19
2.3.1電網大數(shù)據(jù)全生命周期管理建設原則19
2.3.2電網大數(shù)據(jù)全生命周期管理目標21
2.4電網大數(shù)據(jù)全生命周期管理體系架構22
2.5基于全生命周期管理的電網大數(shù)據(jù)質量治理30
第3章電網大數(shù)據(jù)采集技術33
3.1電網大數(shù)據(jù)的分類及特點33
3.2電網大數(shù)據(jù)采集技術研究38
3.2.1數(shù)據(jù)采集系統(tǒng)的基本構架39
3.2.2數(shù)據(jù)采集系統(tǒng)的邏輯框架393.2.3數(shù)據(jù)遠程采集系統(tǒng)的物理架構41
3.2.4電網大數(shù)據(jù)采集技術分類42
3.3電網異構大數(shù)據(jù)混合采集系統(tǒng)及平臺設計42
3.3.1系統(tǒng)簡介43
3.3.2核心功能45
第4章電網大數(shù)據(jù)存儲技術49
4.1電網大數(shù)據(jù)分布式存儲技術49
4.2基于區(qū)塊鏈技術的電網全業(yè)務數(shù)據(jù)分布式云存儲架構57
4.3電網大數(shù)據(jù)分布式檢索技術60
第5章電網大數(shù)據(jù)融合技術64
5.1信息融合技術64
5.2電網大數(shù)據(jù)融合框架69
5.3電網大數(shù)據(jù)融合平臺70
第6章電網大數(shù)據(jù)分析與挖掘技術72
6.1電網大數(shù)據(jù)分析步驟72
6.2電網大數(shù)據(jù)分析與挖掘技術概述74
6.2.1數(shù)據(jù)挖掘技術74
6.2.2機器學習78
6.2.3知識圖譜技術81
6.2.4區(qū)塊鏈技術83
6.3電網大數(shù)據(jù)分析與挖掘應用案例85
6.3.1數(shù)據(jù)挖掘及機器學習在電網大數(shù)據(jù)中的應用85
6.3.2知識圖譜技術在電網大數(shù)據(jù)中的應用88
6.3.3區(qū)塊鏈技術在電網數(shù)字資產管理中的應用90
第7章電網大數(shù)據(jù)可視化技術96
7.1可視化技術的基本概念96
7.2可視化技術分類98
7.3電網大數(shù)據(jù)應用場景的可視化案例106
第8章電網大數(shù)據(jù)歸檔與銷毀技術115
8.1數(shù)據(jù)歸檔115
8.2數(shù)據(jù)恢復與銷毀116
第9章電網大數(shù)據(jù)安全與隱私保護118
9.1電網大數(shù)據(jù)面臨的安全風險118
9.2電網安全技術120
9.2.1設備安全相關技術120
9.2.2系統(tǒng)認證安全相關技術121
9.2.3通信安全相關技術121
9.2.4其他安全技術122
9.3電網用戶信息隱私保護123
9.3.1數(shù)據(jù)庫加密技術123
9.3.2數(shù)據(jù)脫敏技術125
9.3.3電網大數(shù)據(jù)脫敏方案128
參考文獻131