相关疑难解决方法(0)

直接将数据流式传输到hdfs而无需复制

我正在寻找不同的选项,通过它我可以使用python直接将数据写入hdfs,而无需存储在本地节点上,然后使用copyfromlocal.

我想使用类似于本地文件的hdfs文件,并使用write方法将该行作为参数,具体如下:

   hdfs_file = hdfs.create("file_tmp")
   hdfs_file.write("Hello world\n")
Run Code Online (Sandbox Code Playgroud)

是否存在类似于上述用例的内容?

python hadoop hdfs

8
推荐指数
1
解决办法
5012
查看次数

标签 统计

hadoop ×1

hdfs ×1

python ×1