不论是能源领域,还是电工产业都充斥着海量数据和有待开发的巨大数据利用的需求。数据被看做是知识的载体,是人们认知世界的一种新的渠道和新的方法。大数据的应用,可以看做是知识在计算机网络上的新呈现,把人脑的处理工作变成了计算机处理,最根本的驱动是智能和智慧的处理,本质上将人类处理知识,变成机器处理知识,使人的智慧得以解放,带来全新的发展。普遍认为,大数据的数据度量达到TB或以上规模…
对大数据的概念业界已基本达成共识,但目前还未形成统一的定义:
1)麦肯锡认为“大数据是指无法在一定时间内用传统数据库软件工具对其内容进行抓取、管理和处理的数据集合”;
2)维基百科认为“指的是所涉及的数据量规模巨大到无法通过人工,在合理时间内达到截取、管理、处理、并整理成为人类所能解读的信息”;
3)Gartner认为“大数据是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产”。
中国电力科学研究院对大数据的理解是:一项综合性技术,是传感量测技术、信息通信技术、计算机技术、数据分析技术与领域技术的结合;一门科学和一种方法论,是一种全新的科学理论和哲学方法;量和复杂程度发展到某个阶段的产物,借助于更为先进的计算机技术、通信技术,对传统的数据挖掘、数据分析技术的继承、提升以及革命性的创新。
大数据的特征是体量浩大、类型繁多、速度快且时效高、价值巨大但密度低。
大数据的认知和理解:
1)能力增长:随着新技术的发展,数据的处理和探索能力发生了质的飞跃,大数据最大的特点是并行处理、广泛关联。可以在更大的数据范围,从更复杂的角度,以更高的时效性,发掘数据的价值;
2)需求提升:由于各项能力的提升,使得以往不可能实现的场景变得可能,同时提高了人们对数据的重视程度,并且激发了人们对数据价值挖掘探索的巨大渴望;
3)认识变革:大数据的核心不是“大”,同样也不是“数据”,是收集、处理、挖掘和利用数据的能力!是认识事物、发现规律、总结知识的必然过程!
4)最终目标:大数据是人们认知世界能力的延展,是智慧革命,最终数据将与人力、资本一样,成为社会的核心财富。
从哲学意义上讲,大数据是物理世界和人类交互的媒介,通过数据,人类获取物质世界的状态信息,同样通过数据,人类将自身的思维和决策反作用于物质世界。
中国电科院认为,智能电网是以物理电网为基础,将现代先进的传感测量技术、通讯技术、信息技术、计算机技术和控制技术与物理电网高度集成而形成的新型电网。它涵盖发电、输电、变电、配电、用电和调度等各个环节,对电力市场中各利益方的需求和功能进行协调。
随着智能电网的快速发展,智能电表的大规模部署和传感监测技术的广泛应用,电力工业产生了大量结构多样、来源复杂的数据,根据数据来源的不同,可以将智能电网大数据分为电网内部数据和电网外部数据。这些数据之间并非彼此孤立,而是相互关联、相互影响,存在着比较复杂的关系。大数据是实现智能电网“智能化”的重要工具。
智能电网大数据带来的挑战:如何利用如此众多且复杂的数据?如何面对缺失和无效的数据?如何将数据整合集成进入大数据平台?如何将数据成果转换为业务应用?
智能电网大数据带来的机遇:转变视角,以大数据的视角,重新对数据的进行认知;建立机制,有机会重新设计数据产生和利用的流程;搭建平台,固化数据生产、加工、利用的流程;创新应用,用新的服务模式转变原有的应用体系。
中国电科院的大数据研究实践
通过智能电网和能源互联网的探索实践,中国电科院把大数据作为重要战略方向,并制定出理论研究、技术探索、应用实践三步走的推进路线。
2014年,中国电力科学研究院在调研国内外智能电网大数据研究和应用现状基础上,结合目前智能电网大数据所面临的机遇和挑战,对各重点技术领域的需求进行了详细的分析和整理,撰写了《智能电网大数据技术白皮书》。
根据目前智能电网大数据技术研究应用现状及其发展前景的分析和预测,我们提出了2014至2020年智能电网大数据技术的发展路线图。
作为技术储备的实际检验,中国电科院完成电力大数据平台搭建,整合了业界主流的先进技术和数据处理理念,采用传统数据仓库与新型数据处理技术混搭的架构,全面支撑院大数据研究工作。
应用实践——应用需求和场景分析
1)服务政府与社会:社会经济状况分析和预测;相关政策制定决策支持。
2)面向电力用户:用户用电行为分析和预测;精细化个性化营销。
3)支撑电力公司运营和发展:电网资产管理(资产管理分析、检修和维护人员管理);新能源并网(包含新能源的电网规划和运行、电动汽车充电站(桩)建设);电网运行管理(系统运行监测和控制、输变电设备状态监测、停电管理分析/故障检测和供电恢复、供电可靠性改善、电能质量监测和电压/无功优化控制、线损分析);电网发展规划(网架结构优化、城市电网规划、电力地图)。
总结和展望
1、智能电网大数据研究尚处于起步阶段,对于数据的理解、组织、利用尚处于尝试和验证阶段,新技术、新思想、新的理念的成熟还需要时间和业务的沉淀。
2、大数据将人们认知、决策、价值发现的过程总结成规律和方法,建立数据应用体系;同时大数据技术,在经过实际检验的过程中发展,不断得到完善,最终成为领先技术。
3、信息化对于智能电网的支撑作用,正逐步由以IT技术为核心,转变为以数据为核心。未来的信息服务模式,将由应用建设,向数据分析服务模式转变。
4、能源互联网是智能电网的进一步深化和发展,是以数据为核心的综合能源管理模式,以大数据支撑下的能源互联,不单单是产业的升级与改造,而是一场智慧体系与架构的变革,它必将带来电工技术及能源产业的创新突破!