是否可以写入远程HDFS?

Tom*_*mmy 4 hadoop hdfs

作为标题,是否可以写入远程HDFS?

例如,我在AWS EC2上安装了HDFS集群,我想将本地计算机中的文件写入HDFS集群.

sur*_*iva 5

您可以通过两种方式写入远程HDFS,

  • 使用WebHDFS apiavailable.It支持在Hadoop集群外部运行的系统来访问和操作HDFS内容.它不需要客户端系统安装hadoop二进制文件.

  • 配置客户端系统Hadoop edge node以与Hadoop集群/ HDFS进行交互.

请参考,

https://hadoop.apache.org/docs/r1.2.1/webhdfs.html

http://www.dummies.com/how-to/content/edge-nodes-in-hadoop-clusters.html