相关疑难解决方法(0)

11
推荐指数
1
解决办法
2万
查看次数

复制Spark Row N次

我想在DataFrame中复制一行,我该怎么做?

例如,我有一个由1行组成的DataFrame,我想创建一个具有100个相同行的DataFrame.我提出了以下解决方案:

  var data:DataFrame=singleRowDF

   for(i<-1 to 100-1) {
       data = data.unionAll(singleRowDF)
   }
Run Code Online (Sandbox Code Playgroud)

但这引入了许多转换,似乎我的后续行动变得非常缓慢.还有另一种方法吗?

scala apache-spark

6
推荐指数
1
解决办法
5195
查看次数

标签 统计

apache-spark ×2

apache-spark-sql ×1

scala ×1