Flume代理 - 我可以像gzip或bz2那样指定压缩吗?

Ale*_*i T 5 hadoop agent flume cloudera

是否可以在Flume代理上指定压缩选项,以便以压缩格式将数据传输到收集器?我知道收集器级别有压缩选项,但是能够从代理传输压缩数据也非常有用.

谢谢!

Can*_*ice 2

Flume 有gzipgunzip水槽装饰器可供您使用。将gzip装饰器放在代理接收器上,将gunzip装饰器放在收集器接收器上,并且在代理和收集器之间传输压缩数据应该可以正常工作。