小编Sud*_*shu的帖子

我们可以使用RDD数据过滤器吗,如RDD.filter(x => x.NOT startswith(“ XX”)

Spark / Scala中是否有任何方法可以过滤那些不Startswith("XX")喜欢的数据,RDD.filter(x => x.startsWith("XX")但是我的要求是过滤那些不以开头的记录"XX"

val custRDD = sc.textFile("D:\\CCA175\\Navdeep\\spark-dataset\\spark-dataset\\problem2\\customer.txt")
val wordRDD = custRDD.flatMap(x=>x.split(',')).filter(x => (x.startsWith("XX") && x.endsWith("XX")))
Run Code Online (Sandbox Code Playgroud)

但是我想过滤那些不以“ XX”开头/结尾的记录

scala apache-spark

1
推荐指数
1
解决办法
48
查看次数

标签 统计

apache-spark ×1

scala ×1