只能安装Hadoop HDFS吗?

kik*_*ell 4 hadoop mapreduce hdfs mesos mesosphere

我是Hadoop世界的新手,我需要在Hadoop HDFS上安装mesos才能创建容错的分布式文件系统,但是所有安装参考都包括针对我的场景的必要组件,例如:MapReduce。

您对此有任何想法或参考吗?

zhu*_*ala 6

绝对有可能。不要将Hadoop视为可安装程序,它只是由在集群内不同节点上运行的一堆Java进程组成。

如果使用hadoop tar球,则只需要HDFS就可以运行NameNode和DataNodes进程。

如果您使用其他hadoop发行版(例如HDP),我认为HDFS和mapreduce来自不同的rpm软件包,但是同时安装这两个rpm软件包确实有害。如果只需要HDFS,只需再次运行NameNode和DataNodes。