我写信给hadoop hdfs.该文件必须使用lzo进行压缩.该文件也将实时附加.
源文件是hadoop中不存在的gzip文件.批量处理此gzip文件,然后执行lzo压缩并附加到hadoop.这是否消除了使用map reduce的可能性？
我们怎样才能做到这一点？
在此先感谢您的帮助
gzip hadoop lzo hdfs
gzip ×1
hadoop ×1
hdfs ×1
lzo ×1