大数据分析平台Hadoop的构建与研究

详细信息    查看全文 | 推荐本文 |

	作者：杨帆 关键词：大数据分析 ; Hadoop平台 ; 关键技术 ; 标准化 中文刊名：DNZS 英文刊名：Computer Knowledge and Technology 机构：集美工业学校; 出版日期：2019-05-25 出版单位：电脑知识与技术 年：2019 期：v.15 语种：中文; 页：DNZS201915013 页数：3 CN：15 ISSN：34-1205/TP 分类号：34-36

摘要

这些年随着大数据时代的到来,企业的数据量在成倍的增长,互联网的普遍性和广泛应用赋予了大数据四大特征,分别为数据量大、数据类型多、处理速度极快以及价值密度低。而传统的单机模式在面对处理具有这些特性的大数据时显得力不从心,不仅存在着运算效率低下的问题,而且并不能很好的容纳不同类型的数据,扩展性较差。针对以上所述问题,采用云计算的技术建立大数据挖掘分析平台,对数据进行广泛的价值挖掘,从而提供科学的企业决策依据,是当今大数据平台构建的主要目的。本文将基于Hadoop对大数据平台构建的关键技术点进行分析,将会从数据的采集、框架计算、结果分析输出以及并行的数据算法等方面对技术的标准化进行调研和分析。
        

引文

[1]李伟,孙新杰,武晋民.基于Hadoop的大数据分析平台构建研究[J].信息通信,2017(8):247-248.
    [2]王子毅,张春海.基于ECharts的数据可视化分析组件设计实现[J].微型机与应用,2016(14).
    [3]李巍巍.基于云计算的大数据统一分析平台设计与应用[J].自动化与仪器仪表,2016(08).
    [4]杨美沂,林勇.大数据背景下基于云计算的政府统计平台构建[J].统计与决策, 2016(04).
    [5]林昕.基于云计算的大数据挖掘平台构建研究[J].山东工业技术,2015(17).
    [6]李国杰,程学旗.大数据研究:未来科技及经济社会发展的重大战略领域——大数据的研究现状与科学思考[J].中国科学院院刊,2012(6).