Hadoop分布式文件系统和OpenStack对象存储有何不同,最近在Quora上提到的问题，这是关于Hadoop分布式文件系统和OpenStack对象存储的不同。原文如下：“HDFS（Hadoop分布式文件系统）和OpenStack对象存储似乎具有类似的目的：实现冗余，快速，网络存储。这两个系统不同？这两个存储系统最终融入了这两个系统如果他们非常有意义？“在提出的问题后，OpenStack开发人员很快就会回复。本文将前两个回复删除了所有参考的翻译。第一个答案来自Rackspace OpenStack Swift开发人员Chuck他们：虽然HDFS类似于OpenStack对象存储（SWIFT），但这两个系统的整体设计非常不同nt。 1. HDFS使用中央系统来维护文件元数据（NameNode，Name节点），并且在SWIFT中，分布式元数据，并复制交叉组。在单个故障点中使用用于HDF的中央数据系统更难以扩展一个非常大的环境。 2. SWIFT在设计时考虑了多租户架构，HDFS没有多租户架构。 3. HDFS针对更大的文件进行了优化（通常在处理数据时发生），并且SWIFT旨在存储任何可以存储任何大小的文件。 4.在HDFS中，文件写入一次，每次只有一个文件写;在SWIFT中，文件可以多次写入;在并发操作环境中，最近的操作受到最后一次操作。 5.编写了HDFS在Java中，Swift用Python写。此外，HDFS旨在将更大的文件存储为支持数据处理，而Swift则设计为相对普遍的存储解决方案，可靠地存储大量不同的尺寸。第二次答案来自约书亚Mckenty，他是NASA星云云计算项目的首席架构师，它是OpenStack Nova Software的早期开发人员。目前是OpenStack项目监管委员会的成员，或露天公司的公司创始人。查克刚刚介绍了两者之间的技术差异，但两者可以想象的没有集成，并且OpenStack设计峰会抛出了这个主题的集成。简而言之，HDFS旨在实现MapReduce处理使用OOP，存储环境中的对象。对于许多OpenStack公司（包括我自己的公司），支持SWIFT的处理是路线图之上的目标，但每个人都认为MapReduce是一个解决方案。我们已经讨论了HDFS的Wrapen包装器，它将支持OpenStack内部存储应用程序编程接口（API），并允许用户对此数据执行Hadoop查询。还有一种方法可以在SWIFT中使用HDF。但这些方法似乎不是理想的。 OpenStack社区也在研发中进行一些工作，仔细研究其他替代地图德框架（RIAK和CouchdB等）。最后，目前还有一些其他存储项目“属于OpenStack社区（Sheepdog和HC2）。利用数据本地y并使对象存储变为“更智能”，预计将取得进展。
我在win7上安装的Hadoop。在格式化Hadoop文件系统HDFS时出现了您出现过的问题，求解,尝试bin / hdfs namenode -format
hadoop 连接 出现找不到文件系统错误,HDFS配置文件未加载

责任编辑（野上由加奈）

以上就是关于**hadoop文件系统，hadoop简介**的全部内容，如有需要以上系统，请在搜索框搜索商品或者咨询客服，了解更多请关注蚂蚁资源网。
内容来源于网络，如无意中有侵权，请联系客服核实，以便及时删除，谢谢支持！