小编G G*_*G G的帖子

Spark数据帧将列值获取为字符串变量

我正在尝试将列值提取到变量中,以便我可以在代码中的其他位置使用该值.我想尝试如下

 val name= test.filter(test("id").equalTo("200")).select("name").col("name")
Run Code Online (Sandbox Code Playgroud)

它回来了

 name org.apache.spark.sql.Column = name
Run Code Online (Sandbox Code Playgroud)

如何获得价值?

scala dataframe apache-spark apache-spark-sql

14
推荐指数
4
解决办法
5万
查看次数

Spark SQL传递一个变量

我有跟随Spark sql,我想传递变量.怎么做?我尝试了以下方式.

 sqlContext.sql("SELECT count from mytable WHERE id=$id")
Run Code Online (Sandbox Code Playgroud)

sql select

8
推荐指数
3
解决办法
1万
查看次数

如何从字符串中获取日期和时间?

我有一个具有以下架构的数据框:

  root

  |-- date : string (nullable = true)
Run Code Online (Sandbox Code Playgroud)

值看起来像201605250000.如何从此字符串中提取日期,小时和毫米?

scala date apache-spark apache-spark-sql

6
推荐指数
1
解决办法
3487
查看次数

scala选项类型差异

传递两个参数与传递一个参数有什么区别?

val option1 = Option(String,String)
and
val option2 = Option(String)
Run Code Online (Sandbox Code Playgroud)

scala option

1
推荐指数
1
解决办法
209
查看次数

标签 统计

scala ×3

apache-spark ×2

apache-spark-sql ×2

dataframe ×1

date ×1

option ×1

select ×1

sql ×1