隨著“云大物移智”等數(shù)字化技術和應用的蓬勃發(fā)展，國家將依托于數(shù)字資產(chǎn)的“數(shù)字經(jīng)濟”作為經(jīng)濟結構轉型的重要手段，提出建設數(shù)字中國的戰(zhàn)略。
當前，南方電網(wǎng)公司緊緊把握第四次工業(yè)革命的歷史機遇，將數(shù)字化作為公司戰(zhàn)略轉型的重要路徑，重點圍繞數(shù)字電網(wǎng)、數(shù)字運營和數(shù)字能源生態(tài)三個方向，通過“全要素、全業(yè)務、全流程”的數(shù)字化轉型，推進“數(shù)字南網(wǎng)”建設，推動公司向智能電網(wǎng)運營商、能源產(chǎn)業(yè)價值鏈整合商、能源生態(tài)系統(tǒng)服務商轉型。
數(shù)字經(jīng)濟蓬勃發(fā)展，南方電網(wǎng)公司如何收全、管好、用精數(shù)字電網(wǎng)環(huán)境下產(chǎn)生的多源、海量、異構的數(shù)據(jù)資源，成為公司數(shù)字化轉型的重要挑戰(zhàn)。
轉型挑戰(zhàn)
在數(shù)字技術發(fā)展的推動下，社會形態(tài)、市場規(guī)則都發(fā)生重大轉變，數(shù)字化轉型已由互聯(lián)網(wǎng)科技行業(yè)逐步擴展到傳統(tǒng)行業(yè)
面臨新一輪電改等形勢，南方電網(wǎng)公司亟待進行變革。為何這一輪的變革必須依托數(shù)字化?其實不難發(fā)現(xiàn)，對外，數(shù)字化能驅動能源消費市場和產(chǎn)業(yè)生態(tài)的變革；對內，數(shù)字化能賦能企業(yè)生產(chǎn)效率和管理效益的提升；內外相結合，還能共同催生出創(chuàng)新的業(yè)務模式，促進能源價值鏈整合。可見，利用數(shù)字化技術和思維，不僅能推動能源流、價值流、信息流融合，持續(xù)提升公司的信息化、數(shù)字化、智能化水平，還能夠為南方電網(wǎng)公司“三商”轉型戰(zhàn)略落地提供重要支撐。
數(shù)據(jù)、平臺、用戶、應用是南方電網(wǎng)公司數(shù)字化轉型的四大核心要素。數(shù)字電網(wǎng)廣泛運用傳感測量、通信信息等新型技術，將物理電網(wǎng)的結構、特性等信息進行全面的數(shù)字化表征、描述和實現(xiàn)，產(chǎn)生了更加豐富的數(shù)據(jù)類型、更加復雜的數(shù)據(jù)生成模式以及更高的數(shù)據(jù)消費響應要求，給數(shù)據(jù)整合利用帶來巨大的技術挑戰(zhàn)，對南方電網(wǎng)公司數(shù)據(jù)中心(以下簡稱“數(shù)據(jù)中心”)提出了更高的能力要求：如何切實做到“收全”“管好”“用精”數(shù)據(jù)，服務公司數(shù)字化轉型戰(zhàn)略的有效落地成了亟待解決的關鍵問題。
數(shù)據(jù)作為南方電網(wǎng)公司推動能源鏈、價值鏈和信息鏈融合的“原材料”，作為加速“三商”轉型的“催化劑”，是物理電網(wǎng)實現(xiàn)孿生數(shù)字電網(wǎng)的“天然紐帶”。隨著業(yè)務數(shù)字化的程度不斷拓寬加深，將給南方電網(wǎng)公司帶來更多的數(shù)據(jù)，同時數(shù)據(jù)又將驅動業(yè)務產(chǎn)生新的商業(yè)模式，實現(xiàn)數(shù)據(jù)和業(yè)務的良性互動。南方電網(wǎng)公司的數(shù)據(jù)應用體系會隨之從單一的統(tǒng)計報表類分析，衍生出諸如創(chuàng)新業(yè)務流程、智能決策、數(shù)據(jù)挖掘、數(shù)據(jù)洞察、用戶自助分析等更為豐富的業(yè)務應用類型。而傳統(tǒng)的“旁站式”數(shù)據(jù)中心主要還是圍繞從源端業(yè)務系統(tǒng)采集至數(shù)據(jù)中心的數(shù)據(jù)開展分析型應用，對事務型的業(yè)務系統(tǒng)應用實時支撐不足，各業(yè)務系統(tǒng)間容易形成技術筒、數(shù)據(jù)墻，導致數(shù)據(jù)融合難度不斷加大。此外，業(yè)務系統(tǒng)“各自為政”地開展數(shù)據(jù)應用建設，為南方電網(wǎng)公司推動公共數(shù)據(jù)積累和公共數(shù)據(jù)服務沉淀，實現(xiàn)數(shù)據(jù)“一處產(chǎn)生，多處應用”帶來制約，難以構建公司統(tǒng)一的數(shù)據(jù)支撐能力視圖，公司數(shù)據(jù)中心升級完善就此啟動。
定位升級
推動數(shù)據(jù)中心從“旁站式”向“底座式”模式轉變，真正實現(xiàn)公司數(shù)據(jù)層面的無縫融合和業(yè)務層面的共享共用
自“十二五”以來，數(shù)據(jù)中心發(fā)展歷經(jīng)三個階段：在早期“6+1”系統(tǒng)建設階段，搭建企業(yè)級數(shù)據(jù)倉庫，實現(xiàn)了公司總部指標的統(tǒng)計分析與展現(xiàn)，支撐公司各業(yè)務部門的指標管理要求；在中期大數(shù)據(jù)技術初步應用階段，數(shù)據(jù)中心完成了傳統(tǒng)集中式數(shù)據(jù)處理架構向分布式處理架構的升級，為全網(wǎng)的統(tǒng)計分析需求提供了技術支撐；在當前大數(shù)據(jù)技術體系全面建設與發(fā)展的數(shù)字化轉型階段，公司引入先進技術和成熟組件產(chǎn)品建設“底座式”數(shù)據(jù)中心，實現(xiàn)了對海量、異構、多頻數(shù)據(jù)的采集、存儲、計算和分析服務。
所謂的“底座式”數(shù)據(jù)中心，是指以云數(shù)一體的方式升級公司數(shù)據(jù)中心，實現(xiàn)數(shù)據(jù)中心組件自動化部署、資源彈性化管理、數(shù)據(jù)模型統(tǒng)一設計和管控、事務型與分析型數(shù)據(jù)庫一體化管理、數(shù)據(jù)服務化供給和數(shù)據(jù)全鏈路監(jiān)控的技術特性，切實打通數(shù)據(jù)壁壘，沉淀公共數(shù)據(jù)服務，使得公司數(shù)據(jù)中心成為公司數(shù)字化轉型和數(shù)字南網(wǎng)建設所有平臺和應用的統(tǒng)一基礎數(shù)據(jù)底座。
作為南方電網(wǎng)公司數(shù)字化轉型和數(shù)字南網(wǎng)建設的基礎數(shù)據(jù)底座，數(shù)據(jù)中心將推動全域數(shù)據(jù)統(tǒng)一匯聚、數(shù)字電網(wǎng)模型統(tǒng)一設計、海量數(shù)據(jù)統(tǒng)一存儲、大數(shù)據(jù)分析計算組件統(tǒng)一支撐，促進數(shù)據(jù)層面的無縫融合和業(yè)務層面的共享共用。對內，實現(xiàn)對各類業(yè)務應用提供按需便捷的數(shù)據(jù)服務，滿足業(yè)務模式創(chuàng)新需求，成為提升管理水平的“倍增器”；對外，實現(xiàn)南方電網(wǎng)公司與國家、政府、企業(yè)間的數(shù)據(jù)對接，推動共享開放、合作互利，成為公司構建能源價值鏈的“連接器”。
能力升級
實現(xiàn)重點技術突破，持續(xù)構建和完善大數(shù)據(jù)核心工具組件，推動數(shù)據(jù)中心能力升級，為數(shù)字南網(wǎng)建設賦能
2019年，數(shù)據(jù)中心根據(jù)基礎數(shù)據(jù)底座的總體定位，通過采購相關成熟工具組件開展平臺功能的建設完善，面向數(shù)據(jù)采集、建模、存儲、分析和服務能力得到了全面加強，為促進公司大數(shù)據(jù)技術與業(yè)務的深度融合提供了新的有效的支撐。
在數(shù)據(jù)采集方面，數(shù)據(jù)中心作為南方電網(wǎng)公司數(shù)據(jù)統(tǒng)一匯聚的唯一平臺，數(shù)據(jù)采集范圍不斷擴展，數(shù)據(jù)種類日漸豐富。利用OGG日志解析技術，數(shù)據(jù)中心已實現(xiàn)包括全網(wǎng)營銷、資產(chǎn)、財務、人資等10個系統(tǒng)的結構化數(shù)據(jù)全域采集，累計采集數(shù)據(jù)368.9TB，日均增量0.3TB；通過sftp、kafka等采集技術，已實現(xiàn)對58套調度自動化系統(tǒng)(含OMS)實時數(shù)據(jù)的秒級采集，并實現(xiàn)了涵蓋五省區(qū)電網(wǎng)公司和深圳供電局的計量自動化、配網(wǎng)自動化、氣象、設備在線監(jiān)測、電能質量、電壓監(jiān)測、繼電保護及故障信息系統(tǒng)、覆冰、雷電、山火共148套系統(tǒng)實時數(shù)據(jù)的秒級采集，累計采集數(shù)據(jù)567TB；此外，數(shù)據(jù)中心也已完成協(xié)同辦公系統(tǒng)、電子商務系統(tǒng)、數(shù)字檔案館、機巡管理系統(tǒng)中的圖檔、文件、機巡圖片等非結構化數(shù)據(jù)持續(xù)采集，累計采集數(shù)據(jù)110TB。
在數(shù)據(jù)模型方面，構建了南方電網(wǎng)公司統(tǒng)一數(shù)字電網(wǎng)模型基線，為打通數(shù)據(jù)關聯(lián)、保障數(shù)據(jù)規(guī)范、推動數(shù)據(jù)高效應用提供了基礎支撐。依據(jù)各業(yè)務域需求，數(shù)據(jù)中心開展了覆蓋全域的統(tǒng)一數(shù)字電網(wǎng)模型基線版設計，涵蓋發(fā)、輸、變、配、用能量全過程，貫穿規(guī)劃、采購、運行、檢修供應鏈全環(huán)節(jié)，2019年累計完成932個模型設計開發(fā)，為電網(wǎng)資源中心、電網(wǎng)管理平臺、客戶服務平臺等提供了統(tǒng)一模型支撐。
在數(shù)據(jù)存儲方面，數(shù)據(jù)中心采用的數(shù)據(jù)庫技術門類齊全，支撐的應用場景豐富：利用MPP分布式并行存儲(MPP)技術，支撐了公司企業(yè)級運管和專業(yè)域運管、統(tǒng)計報表和實時指標類數(shù)據(jù)應用；利用分布式列式存儲(HBase)和分布式全文搜索技術(Elastic-search)，支撐了微信賬單、移動營銷等應用；借助分布式結構化存儲技術(Kudu)，支撐數(shù)字烏當、海南掌廳等應用；借助實時數(shù)據(jù)存儲技術，支撐了對時序大數(shù)據(jù)的存儲和處理；借助對象存儲技術，實現(xiàn)了對協(xié)同辦公系統(tǒng)、電子商務系統(tǒng)、數(shù)字檔案館、機巡管理系統(tǒng)中的圖檔、文件、機巡圖片等非結構化數(shù)據(jù)的統(tǒng)一托管存儲。截至目前，數(shù)據(jù)中心用于數(shù)據(jù)存儲的服務器共421臺，可用存儲達21.34PB，通過彈性擴容能力逐步承載公司全域數(shù)據(jù)的存儲需求。
在數(shù)據(jù)服務組件方面，打造數(shù)據(jù)中心服務組件層，沉淀公共數(shù)據(jù)服務，提升數(shù)據(jù)服務標準化水平和服務敏捷性。2019年，數(shù)據(jù)中心打造了統(tǒng)一門戶、數(shù)據(jù)工廠、自助分析、數(shù)據(jù)服務引擎等能力服務，為數(shù)據(jù)“原材料”的快速加工和有效沉淀提供了支撐，各級員工可利用一站式的數(shù)據(jù)開發(fā)模塊開展數(shù)據(jù)全流程處理、數(shù)據(jù)可視化展示、數(shù)據(jù)自助分析等應用，為加速數(shù)據(jù)分析應用迭代、員工自主分析、內部數(shù)據(jù)供給提供了能力保障。
在數(shù)據(jù)安全方面，南方電網(wǎng)公司構建起關鍵領域和敏感信息“進不來、拿不走、打不開、賴不掉”的四道信息安全防線，確保在不影響業(yè)務、不降低性能的前提下，對數(shù)據(jù)中心數(shù)據(jù)構建了入口加密、出口脫敏、全程審計的數(shù)據(jù)安全防護能力。在數(shù)據(jù)加密方面，已完成對生產(chǎn)管理區(qū)重要數(shù)據(jù)的加密，消除了明文存儲引起的數(shù)據(jù)泄露隱患；在數(shù)據(jù)脫敏方面，已實現(xiàn)測試區(qū)所有數(shù)據(jù)均為脫敏數(shù)據(jù)，生產(chǎn)區(qū)數(shù)據(jù)可按需進行動態(tài)脫敏；在數(shù)據(jù)審計方面，目前已實現(xiàn)對數(shù)據(jù)庫操作行為的全面監(jiān)測與審計，能夠及時發(fā)現(xiàn)非法違規(guī)操作并實時告警，也可以做到主動防御和攻擊留痕，基本達到實時審計、全過程審計和安全問題可追溯的要求。
展望未來
數(shù)據(jù)中心作為支撐南方電網(wǎng)數(shù)字化轉型的基礎數(shù)據(jù)底座，將成為釋放大數(shù)據(jù)價值的新引擎
2020年，數(shù)據(jù)中心將在《大數(shù)據(jù)技術與應用發(fā)展專項規(guī)劃》的總體指導下，以平臺升級完善和應用建設為抓手，數(shù)據(jù)治理和數(shù)據(jù)安全保障為兩翼，完成支撐數(shù)字化轉型的基礎數(shù)據(jù)底座建設，實現(xiàn)全域數(shù)據(jù)可信匯聚、多元服務按需供給、業(yè)務發(fā)展全面驅動、數(shù)據(jù)安全全面保障，進一步促進大數(shù)據(jù)技術與業(yè)務深度融合，打造成為南方電網(wǎng)公司釋放大數(shù)據(jù)價值的新引擎。
在南方電網(wǎng)公司數(shù)字化轉型的工作部署下，數(shù)據(jù)中心將繼續(xù)從制度標準、數(shù)據(jù)平臺、數(shù)據(jù)供給、數(shù)據(jù)管理、數(shù)據(jù)應用和數(shù)據(jù)安全六個方面入手推動相關建設：
在制度標準方面，持續(xù)完善大數(shù)據(jù)領域相關制度標準和技術規(guī)范的編制與發(fā)布，讓南方電網(wǎng)公司基礎數(shù)據(jù)管控工作有法可依，有章可循。
在基礎平臺方面，開展數(shù)據(jù)中心相關平臺與應用有序上云，實現(xiàn)“云數(shù)一體”；推動數(shù)據(jù)湖建設，實現(xiàn)南方電網(wǎng)公司多源異構數(shù)據(jù)的統(tǒng)一匯聚和全面融合，同步支撐分析型與事務型業(yè)務應用；持續(xù)開展數(shù)據(jù)服務化能力建設，為各類業(yè)務平臺和數(shù)據(jù)應用提供敏捷、高效、準確的數(shù)據(jù)供給；建立數(shù)據(jù)端到端的全鏈路業(yè)務監(jiān)控，支撐數(shù)據(jù)多方位監(jiān)控和分析，為提高數(shù)據(jù)質量提供支撐。
在數(shù)據(jù)供給方面，持續(xù)拓展數(shù)據(jù)接入與供給范圍。進一步提升南方電網(wǎng)公司對調度、計量、設備狀態(tài)監(jiān)測三大自動化域的實時數(shù)據(jù)接入范圍和頻次，同時擴展至物聯(lián)網(wǎng)數(shù)據(jù)的全面接入；向各業(yè)務應用提供更加高效的非結構化數(shù)據(jù)接入和支撐；結合各單位對外部數(shù)據(jù)的需求，統(tǒng)籌開展外部數(shù)據(jù)的統(tǒng)一接入和對外共享服務。
在數(shù)據(jù)管理方面，完善制度標準并開展常態(tài)化管控與專項行動，提升對南方電網(wǎng)公司各類平臺和應用建設的數(shù)據(jù)質量保障。按照“三不”原則，持續(xù)開展常態(tài)化數(shù)據(jù)強管控工作，覆蓋數(shù)據(jù)標準、數(shù)據(jù)模型與數(shù)據(jù)技術路線。組織業(yè)務部門和各分子公司開展進一步提升南方電網(wǎng)公司數(shù)據(jù)質量專項行動。
在數(shù)據(jù)應用方面，致力數(shù)據(jù)服務于南方電網(wǎng)公司領導層、管理層與基層全覆蓋，“點面結合”開展數(shù)據(jù)應用建設推廣工作，全方位釋放數(shù)據(jù)價值?！包c”上尋突破，基于公司數(shù)據(jù)中心算力的提升，選取實時算費、電費復核等典型大數(shù)據(jù)應用場景，開展大數(shù)據(jù)技術與業(yè)務的深度融合建設；“面”上重普及，通過自助分析工具等能力的推廣和深化應用，讓數(shù)據(jù)供給服務范圍覆蓋“網(wǎng)、省、地、縣”各級員工，切實滿足不同層級對數(shù)據(jù)的需求。
在數(shù)據(jù)安全方面，數(shù)據(jù)中心將按照國家等保2.0中第三級系統(tǒng)的安全防護要求，深化本體安全及數(shù)據(jù)全生命周期安全防護建設。率先完成數(shù)據(jù)中心同城容災的建設，同步完成異地災備技術路線驗證。
■基層聲音
非結構化數(shù)據(jù)服務平臺上線后，將各單位原本離散存儲的機巡照片、視頻等非結構化數(shù)據(jù)集中存儲、管理，為后續(xù)缺陷照片標注、機器學習算法訓練奠定堅實基礎，方便人工智能等數(shù)字化轉型新技術的深化應用。
——超高壓公司生技部專責 簡洪宇
機巡管理系統(tǒng)的圖片、視頻等數(shù)據(jù)于2019年10月接入到公司數(shù)據(jù)中心非結構化數(shù)據(jù)服務平臺，大大降低了系統(tǒng)存儲壓力，機巡作業(yè)人員對桿塔、線路、絕緣子等故障點的查詢、統(tǒng)計和分析更加快捷便利。
——廣西電網(wǎng)公司生技部專責 于榮華
通過實時數(shù)據(jù)服務平臺采集計量自動化、調度自動化等電網(wǎng)實時數(shù)據(jù)，實現(xiàn)了電量、負荷數(shù)據(jù)的實時同步，為提升基層供電所臺區(qū)線損管理及異常分析水平，縮短用戶停電搶修時間，提升供電服務能力提供了關鍵的數(shù)據(jù)支撐。
——云南電網(wǎng)公司科信部 董燦
實時數(shù)據(jù)平臺在應用支撐過程中針對業(yè)務需求提供了相應的數(shù)據(jù)保障，能滿足應用端對數(shù)據(jù)實時性、完整性的要求，平臺提供接口服務監(jiān)控功能，對數(shù)據(jù)支撐過程中的接口服務情況能很清晰地通過界面了解，及時響應處理問題，平臺服務得到客戶的一致認可。
——廣東電網(wǎng)公司信息中心專責 謝瀚陽
通過數(shù)據(jù)中心自助分析工具可視化的數(shù)據(jù)分析方式，有效解決了都勻供電局缺陷消缺率和消缺及時率到分縣局的統(tǒng)計需求。極大地縮短我局獲取數(shù)據(jù)、分析數(shù)據(jù)的時間。自助分析工具結合不同的應用場景，開展自助分析，成為基層數(shù)據(jù)分析、洞察數(shù)據(jù)的有力幫手。
——貴州省電網(wǎng)公司都勻供電局班長 郎家均
(徐歡 陳彬)
■案例
1 補齊非結構化數(shù)據(jù)服務“短板”
■成果介紹
公司數(shù)據(jù)中心非結構化數(shù)據(jù)服務平臺補全了公司對非結構化數(shù)據(jù)的服務短板，實現(xiàn)了對非結構化數(shù)據(jù)的管理，為公司各類文檔、圖片、音頻、視頻等非結構化數(shù)據(jù)提供統(tǒng)一的PB級存儲、調用訪問、處理和供給等服務能力。
■應用情況
自2019年10月以來，非結構化數(shù)據(jù)服務平臺完成對廣東、廣西、貴州、云南、海南等單位超過100TB(約600萬條)的機巡圖片、視頻、點云等非結構化數(shù)據(jù)接入，有效支撐了全網(wǎng)對機巡數(shù)據(jù)的統(tǒng)一管理，為人工智能圖像識別提供了規(guī)?；臉颖緮?shù)據(jù)。同時，接入了公司總部合同管理系統(tǒng)、電子商務系統(tǒng)超過500萬條的非結構化數(shù)據(jù)，為合同管理和采購記錄提供了高效的存儲和查詢檢索服務。
2 實時數(shù)據(jù)服務升級顯“本領”
■成果介紹
公司數(shù)據(jù)中心實時數(shù)據(jù)服務平臺完成升級，增加了實時采集鏈路監(jiān)控、數(shù)據(jù)接入配置可視化、服務管理、模型融合與匹配支撐等功能；擴大了計量自動化、調度自動化域采集范圍；保障了業(yè)務系統(tǒng)對數(shù)據(jù)實時性、完整性、一致性的服務需求。2019年全年，公司數(shù)據(jù)中心實時數(shù)據(jù)服務平臺已經(jīng)建立起207個數(shù)據(jù)通道，打通了全網(wǎng)調度、計量、設備狀態(tài)監(jiān)測三大領域11個系統(tǒng)，實現(xiàn)了涵蓋運行電能表電壓電流、運行電能表功率、模型數(shù)據(jù)、線路、開關、氣象、覆冰等超過1600項實時數(shù)據(jù)采集，接入的實時數(shù)據(jù)量近600TB，日增量達到0.5TB。
■應用情況
目前已支撐了包括網(wǎng)級生產(chǎn)監(jiān)控指揮平臺配變重過載應用、營銷管理系統(tǒng)的日線損應用、廣東配網(wǎng)調度自動化實時監(jiān)控和輔助分析應用、廣西配網(wǎng)規(guī)劃系統(tǒng)應用以及海南數(shù)字電網(wǎng)平臺應用在內的3個網(wǎng)級應用和42個省級應用，為各業(yè)務領域對實時數(shù)據(jù)的需求提供了強力支撐。
3 自助分析工具“授人以漁”
■成果介紹
2019年12月20日，南方電網(wǎng)公司自助分析工具正式投運，用戶可通過工具靈活獲取數(shù)據(jù)中心豐富的跨業(yè)務域分析素材，同時，用戶無需代碼開發(fā)，通過“拖拉拽”的方式就可以自助創(chuàng)建所需可視化多維分析報表，實現(xiàn)快速高效開展多維度、多角度數(shù)據(jù)分析的業(yè)務支撐。
■應用情況
自助分析工具目前在省、地、市各級選取試點單位開展推廣工作。貴州電網(wǎng)基于自助分析工具，實現(xiàn)都勻供電局缺陷數(shù)據(jù)監(jiān)控指標統(tǒng)計需求和貴陽烏當供電局電量電費分析需求；同時，廣東電網(wǎng)公司基于自助分析工具完成了電子化移交量監(jiān)控、珠海供電局的電量電費等自助分析應用。后續(xù)將總結試點應用單位經(jīng)驗，向全網(wǎng)開放使用。
