首站-论文投稿智能助手
典型文献
基于Hadoop平台的交通管理数据存储系统设计分析
文献摘要:
信息大爆炸产生的数据数量非常庞大且复杂,其中不仅有结构化与半结构化的数据,还有着非结构化的文本、图像、视频等信息数据.因此,对于大数据的分析也成为了研究的重点,尤其是大数据的采集、处理、存储、分析以及安全,是研究的主要目标.在大数据的处理中,Hadoop作为系统基础平台能够实现大数据的分布式处理,其具备可靠、安全、高效以及可伸缩的特点.HDFS是Hadoop平台的基本组件,同时也是目前研究与应用非常广的一种存储大数据的分布式文件系统,而其根本是分流式的分块文件系统.而传统的HDFS读取较大流量文件数据时会出现I/O的性能问题,基于针对此问题进行分析研究进而提出优化后的HDFS存取策略.借助于文件的预处理,实现文件的汇总,提出新的元数据管理与通用文件存储模式,解决HDFS处理大量文件时出现的性能问题,满足交通应用的大数据处理和存储需求.
文献关键词:
Hadoop平台;交通管理系统;数据存储
作者姓名:
杨岚
作者机构:
泉州信息工程学院软件学院 福建泉州 362000
引用格式:
[1]杨岚-.基于Hadoop平台的交通管理数据存储系统设计分析)[J].九江学院学报(自然科学版),2022(04):59-64
A类:
B类:
Hadoop,管理数据,数据存储系统,设计分析,非结构化,信息数据,基础平台,分布式处理,可伸缩,HDFS,分布式文件系统,分块,读取,大流量,件数,存取,借助于,元数据管理,文件存储,存储模式,大量文件,大数据处理,交通管理系统
AB值:
0.379523
相似文献
机器学习与多组学结合推动精准营养的研究进展
王璐;王宇;曾俊;陈伟;江华-637000 南充,川北医学院研究生院;610072 成都,四川省医学科学院·四川省人民医院急诊医学与灾难医学研究所;610072 成都,四川省医学科学院·四川省人民医院急救中心;610072 成都,四川省医学科学院·四川省人民医院急诊医学与灾难医学研究所;610072 成都,四川省医学科学院·四川省人民医院急救中心;610072 成都,四川省急危重症临床研究中心;610072 成都,四川省急危重症临床研究中心;100730 北京协和医院临床营养科;610072 成都,四川省医学科学院·四川省人民医院急诊医学与灾难医学研究所;610072 成都,四川省医学科学院·四川省人民医院急救中心;610072 成都,四川省急危重症临床研究中心;100730 北京协和医院临床营养科
机标中图分类号,由域田数据科技根据网络公开资料自动分析生成,仅供学习研究参考。