Hadoop 存储技术研究进展

韩 洪勇, 曹 源, 顾 龙雨, 吴 杰
山东科技大学电气信息系 山东济南 250000

摘要

摘要：当前的存储技术虽然已经取得了巨大的发展，一块小小的 U 盘就已经能够存储 128G，但是随着智能设备的发展，ipv4 都已经不够用
了，存储技术也已经越来越显得捉襟见肘。需求上来了，硬件跟不上也要解决呀。硬件上需要有突破,软件上也需要有相应的跟进,目前的面
对大数据的解决方案是通过分布式的存储技术来破除硬件上的限制,当然这样做也有助于对提升对数据计算能力。本文将从现在存储技术解
决方案进行讲解。

关键词

关键词：Hadoop；数据获取；数据清洗；数据存储

参考

[1] （美）怀特 著.《Hadoop 权威指南》[M].2.清华大学出版 社, 2010. [2] 陆嘉恒.Hadoop 实战（第 2 版）[M].3. 机械工业出版社华章 公司, 2012. [3] 蔡斌 陈湘萍.Hadoop 技术内幕：深入解析 Hadoop Common 和 HDFS 架构设计与实现原理[M].1-1.机械工业出版社, 2013