Hadoop并非完美:8个代替 HDFS 的绝佳方案
HDFS(Hadoop Distributed File System)是Hadoop项目的核心子项目,是分布式计算中数据存储管理的基础,坦白说HDFS是一个不错的分布式文件系统,它有很多的优点,但也存在有一些缺点,包括:不适合低延迟数据访问、无法高效存储大量小文件、不支持多用户写入及任意修改文件。
Apache软件基金会成立的时候,HDFS就一直在想办法提高它的性能和可用性,坦白说,这也许对试点项目、非常规项目、要求不严格的大环境中比较适用,但是对于某些Hadoop用户来说,他们对于性能、可用性、企业级特性有较高的要求,且注重直接附加存储(DAS)架构,特别是老版本的Hadoop没有高性能的主节点,那么接下来8个产品就是代替HDFS的绝佳方案。
andra(DataStax)
并非一个完全的文件系统,而是一个开源、NoSQL 键值(key-value)商店。这给依靠快速数据访问的Web 应用多了一个HDFS选择。简单来说它把Hadoop融合在Cassandra里面,支持Web应用通过Hadoop快速访问数据, 而Hadoop可以快速访问流入Cassandra的数据。
Ceph 是一个开源、多管齐下的操作系统,因为其高性能并行文件系统的特性,有人甚至认为它是基于Hadoop环境下的HDFS的接班人,因为自2010年就有研究者在寻找这个特性。
ersafe:分散存储网络
本周一Cleversafe宣布将融合Hadoop的并行编程技术和自己的分散存贮网络。其原理是通过把整个元数据分布在集群中(不是依靠单个主节点、不是依靠复制),Cleversafe表示这比HDFS更快、更稳定、更具扩展性。
(IBM)
IBM一直在向高性能要求的用户销售其并行文件系统,包括世界上最快的超级电脑,2010年它推出了基于Hadoop的, 并宣布GPFS不共享集群版本比Hadoop快多了,因为
它在内核级别中运行,而不是在操作系统中运行例如HDFS。
on(EMC)
EMC提供Hadoop发行版已经一年了,但2012年1月转型为HDFS企业级别的新方案Isilon 的 OneFS文件系统。因为Isilon可以读取 NFS, CIFS以及 HDFS 协议, 一个单独的 Isilon NAS系统可以摄入、处理、分析数据。
re
HPC存储提供商Xyratex 增在2011年的一份报道中写到, 基于Lustre的集群会比基于HDFS的集群更快更便宜。
7. MapR文件系统
MapR 文件系统在业内已经具有一定知名度了,不仅MapR宣布它自己的文件系统比HDFS快2-5倍(实际上有20倍),它还具有镜像、快照、高性能这些企业用户喜欢的特点。
ppHadoop开放方案
NetApp重新改版了物理Hadoop结构:把HDFS放在磁盘阵列中,通过这样来达到更快、更稳定、更安全的Hadoop工作。
-
医院办公室工作计划范文
时间过得可真快,从来都不等人,我们又将续写新的诗篇,展开新的旅程,我们要好好计划今后的学习,制定一份计划了。相信许多人会觉得计划很难写?下面是小编为大家整理的医院办公室工作计划范文,希望能够帮助到大家。医院办公室工作计划范文1(一)建章立制,打下良好工作基础,明...
-
四年级语文年度德育工作计划
时间就如同白驹过隙般的流逝,很快就要开展新的工作了,写好计划才不会让我们努力的时候迷失方向哦。那么你真正懂得怎么写好计划吗?下面是小编帮大家整理的四年级语文年度德育工作计划,供大家参考借鉴,希望可以帮助到有需要的朋友。四年级语文年度德育工作计划1一、...
-
农村小学少先队工作计划
人生天地之间,若白驹过隙,忽然而已,我们又将接触新的知识,学习新的技能,积累新的经验,现在就让我们好好地规划一下吧。计划怎么写才不会流于形式呢?以下是小编帮大家整理的农村小学少先队工作计划,仅供参考,欢迎大家阅读。农村小学少先队工作计划1一、指导思想依据学校...
-
信息技术教师上半年工作计划
时间过得可真快,从来都不等人,我们又将接触新的知识,学习新的技能,积累新的经验,此时此刻需要制定一个详细的计划了。计划怎么写才不会流于形式呢?以下是小编为大家整理的信息技术教师上半年工作计划,欢迎大家分享。信息技术教师上半年工作计划120xx年上半学期马上就...
相关文章
- 关于The Holiday of Labors Day六年级英语作文
- 使用Photoshop做HDR合成图片
- Adoption of the Declaration of Human Rights演讲稿
- school sports day的教学反思
- Unit10 You’re supposed to shake handsB评课稿大纲
- hadoop是什么-hadoop优点
- 三年级下册《What does she have at school》教学案例
- 初三的英语作文:The Holiday of Labors Day
- 父亲节英语作文:(Happy Father‘s Day,Dad)
- 自学一年coreldraw Photoshop CAD 三剑客,在上海深圳就业前景