小编Him*_*hra的帖子

Tachyon默认是由Apache Spark中的RDD实现的吗?

我正在尝试了解Spark的内存功能.在这个过程中,我遇到了Tachyon ,它基本上在内存数据层中,通过使用沿袭系统提供容错而无需复制,并通过检查数据集来减少重新计算.现在让人感到困惑的是,Spark的标准RDD系统也可以实现所有这些功能.所以我想知道RDD在幕后实施Tachyon来实现这些功能吗?如果不是Tachyon的用途,那么它的所有工作都可以通过标准RDD来完成.或者我在将这两者联系起来时犯了一些错误?一个详细的解释或链接将是一个很大的帮助.谢谢.

bigdata in-memory-database apache-spark rdd alluxio

8
推荐指数
1
解决办法
708
查看次数

标签 统计

alluxio ×1

apache-spark ×1

bigdata ×1

in-memory-database ×1

rdd ×1