什么用于实时日志聚合和查询？

Question

我正在寻找可以帮助我聚合实时日志的工具/数据库/解决方案,并且可以实时查询它们.
基本要求是能够尽快交付结果,请记住,可能有许多事件要查询(可能是数十亿),但是日志会有很多"列",每个查询都会在这些列上设置一些条件,所以最终结果将是某种聚合,或者只返回一小部分行.

现在我正在看HDFS + HBase,这似乎是一个很好的解决方案.还有其他选择吗？你能推荐一下吗？

Answer 1

您可以查看 Flume： https: //github.com/cloudera/flume/wiki。