典型文献
基于MapReduce并行计算的网站日志数据分析处理
文献摘要：
随着信息技术的快速发展,大数据正以成倍的形势增长.数据也越来越呈现出数量巨大、结构复杂、类型众多、富有价值等特点.然而挖掘出数据中的价值才是关键,面对海量的数据,单靠传统的计算方式已经不能满足数据处理的需要.并行计算的优越性已经得到了的认可,MapReduce已经得到了广泛的应用.阐述MapReduce的原理基础,应用MapReduce计算模型的特性,将分布式文件系统中的大规模数据集切分成独立的数据块将计算均匀的分布到多台异构计算机上,来分析log日志,是一个很好的处理方案.大型网站的服务器往往会产生海量的log日志进行处理,这些log日志记录的其他机器访问服务器的IP、时间、HTTP协议、状态码等信息.
文献关键词：
大数据;并行计算;MapReduce;数据分析;日志
中图分类号：
作者姓名：
刘义卿;陈新房
作者机构：
防灾科技学院 信息工程学院,河北 三河 065201
文献出处：
引用格式：
[1]刘义卿;陈新房-.基于MapReduce并行计算的网站日志数据分析处理)[J].科学技术创新,2022(01):101-104
A类：
B类：
MapReduce,并行计算,日志数据分析,数据分析处理,成倍,挖掘出,单靠,计算方式,足数,分布式文件系统,大规模数据集,切分,数据块,多台,异构计算,log,处理方案,服务器,日志记录,HTTP
AB值：
0.373911
相似文献
机标中图分类号，由域田数据科技根据网络公开资料自动分析生成，仅供学习研究参考。
