小编Ank*_*ita的帖子

Spark:线程“main”org.apache.spark.sql.catalyst.errors.package 中的异常

在运行我的 spark-submit 代码时,我在执行时收到此错误。

执行连接的 Scala 文件。

我只是想知道这个 TreeNodeException 错误是什么。

为什么我们有这个错误?

请分享您对此 TreeNodeException 错误的想法:

Exception in thread “main” org.apache.spark.sql.catalyst.errors.package$TreeNodeException: execute, tree:
Run Code Online (Sandbox Code Playgroud)

scala apache-spark

8
推荐指数
1
解决办法
5712
查看次数

Scala:如何使用多个分隔符拆分单词

假设我有这样的文本文件:

Apple#mango&banana@grapes
Run Code Online (Sandbox Code Playgroud)

在执行单词计数之前,需要在多个分隔符上拆分数据.

怎么做?

split scala

3
推荐指数
1
解决办法
3710
查看次数

如何在Hive中爆炸map数据类型或如何在Hive中提供多个别名

假设我查询:

select explode(map_column_name) as exploded from table_name 
Run Code Online (Sandbox Code Playgroud)

我收到此错误:

AS子句中的别名数与UDTF输出的列数不匹配,预计有2个别名,但得到1

我用google搜索错误,并且知道要给多个别名,我们使用堆栈函数.如何使用堆栈函数以及爆炸函数,以便最终爆炸map数据类型,同时也提供2个别名?

请耐心等待我,因为我是初学者并且正在学习Hive.

hive hiveql

1
推荐指数
1
解决办法
7653
查看次数

SCALA:读取文本文件并创建它的元组

如何从以下存在的RDD创建元组?

// reading a text file "b.txt" and creating RDD 
val rdd = sc.textFile("/home/training/desktop/b.txt") 
Run Code Online (Sandbox Code Playgroud)

b.txt数据集 - >

 Ankita,26,BigData,newbie
 Shikha,30,Management,Expert
Run Code Online (Sandbox Code Playgroud)

scala tuples apache-spark

0
推荐指数
1
解决办法
1662
查看次数

标签 统计

scala ×3

apache-spark ×2

hive ×1

hiveql ×1

split ×1

tuples ×1