是否可以在没有HDFS和Hadoop集群的情况下在本地运行MapReduce？

Question

鉴于我在Windows系统中开发MapReduce任务,在将它们移动到HDFS集群之前,我想在本地运行MapReduce.我只想检查我的mapper逻辑,inputSplits,输入/输出格式等是如何工作的.有可能吗？

Answer 1

Hadoop以3种模式运行.

1.local mode  
2.psuedo mode  
3.distributed mode. 

您正在寻找的是本地模式.您可以在以2或3种模式运行之前从eclipse调试mapreduce代码.
这个在本地模式下运行应用程序的分步指南可以帮助您调试应用程序.
希望能帮助到你!