基于Hadoop生态环境的大数据平台在电网公司海量数据准实时处理中的应用

详细信息    查看官网全文

• 论文作者：钱晓真 ; 陈琰 ; 黄文思
• 年：2016
• 作者机构：国网上海市电力公司信息通信公司;国网信通亿力科技有限责任公司;
• 论文关键词：智能电网 ; 大数据 ; 分布式 ; 存储计算 ; 海量数据
• 会议召开时间：2016-06-25
• 会议录名称：2016智能电网发展研讨会论文集
• 语种：中文
• 分类号：F426.61;TP311.13
• 学会代码：HDJS
• 会议名称：2016智能电网发展研讨会
• 会议地点：中国北京
• 主办单位：中国电力科学研究院
• 学会名称：北京市海淀区太极计算机培训中心
• 页数：5
• 文件大小：1032k
• 原文格式：O
• 会议级别：全国

摘要

随着智能电网的发展,电网公司的各类业务应用产生了海量的数据,传统信息技术的解决方案在数据存储和分析技术方面存在一定的瓶颈,其架构难以满足对数据海量准实时处理的需求。基于Hadoop生态环境的大数据技术是以分布式文件系统为基础的大规模并行数据处理平台,它能充分利用硬件集群的资源,进行并行计算和内存流计算,大大提高了数据运算分析的效率,全面支撑电网公司如准实时线损运算、设备准实时在线故障研判预警等对海量准实时数据处理分析的需求,有望大大提高数据管理的效率。

引文