Apache Spark 和 Apache Arrow 有什么区别?

Wan*_*rer 4 hadoop bigdata apache-spark apache-arrow

Apache Arrow 和 Apache Spark 之间有什么区别?Apache Arrow 会取代 Hadoop 吗?

小智 5

  • Apache Arrow是一个提议的内存数据层,旨在支持不同的分析负载。
  • Apache Spark是一个与存储无关的集群计算框架。

这两者不属于同一类别,也不相互竞争,就像 Arrow 不与 Hadoop 竞争一样。