小编Mir*_*mid的帖子

如何从sparkContext中读取特定行

嗨,我正在尝试使用spark从文本文件中读取特定行.

SparkConf conf = new SparkConf().setAppName(appName).setMaster(master);
sc = new JavaSparkContext(conf);
JavaRDD<String> lines = sc.textFile("data.txt");
String firstLine = lines.first();
Run Code Online (Sandbox Code Playgroud)

它可以使用.first()命令获取data.text文档的第一行.如何访问文档的第N行?我需要java解决方案.

java text line apache-spark

6
推荐指数
1
解决办法
6209
查看次数

标签 统计

apache-spark ×1

java ×1

line ×1

text ×1