小编Raj*_*aur的帖子

了解KeyValue嵌入式数据存储区与FileSystem

我有一个关于FileSystem用法的基本问题我想使用嵌入式KeyValue存储,它非常面向写入.(持久)说我的值大小是a)10 K b)1 M并且读取和更新的数量相等

我只是创建包含值的文件,并且名称作为键.

它不像使用KeyDB或RocksDB这样的KeyValue存储一样快.

请有人帮我理解.

file key-value leveldb

10
推荐指数
1
解决办法
2248
查看次数

如何将Avro结构转换为SchemaRDD并返回?

有没有办法将Avro结构转换为SchemaRDD?我在https://issues.apache.org/jira/browse/SPARK-2736中看到了JavaRDD的示例,但无法找到任何创建SchemaRDD的内容.

有一个链接显示如何将SchemaRDD转换为Avro,但我想知道Spark 1.1中是否提供了一些内容

https://issues.apache.org/jira/browse/SPARK-3350

avro apache-spark

5
推荐指数
1
解决办法
649
查看次数

标签 统计

apache-spark ×1

avro ×1

file ×1

key-value ×1

leveldb ×1