Hadoop复制一个目录？

Question

是否有可以将整个本地目录复制到HDFS的HDFS API？我找到了一个用于复制文件的API,但有一个用于目录吗？

Answer 1

使用Hadoop FS shell.特别:

$ hadoop fs -copyFromLocal /path/to/local hdfs:///path/to/hdfs

如果要以编程方式执行此操作,请创建两个FileSystems(一个Local和一个HDFS)并使用FileUtil类

Answer 2

我尝试从目录中复制使用

/hadoop/core/bin/hadoop fs -copyFromLocal /home/grad04/lopez/TPCDSkew/ /export/hadoop1/lopez/Join/TPCDSkew

它给了我一个错误,说Target是一个目录.然后我将其修改为

/hadoop/core/bin/hadoop fs -copyFromLocal /home/grad04/lopez/TPCDSkew/*.* /export/hadoop1/lopez/Join/TPCDSkew

有用 .