小编Aji*_* Kb的帖子

如何在Python中创建示例Spark dataFrame?

我想创建一个示例数据框,但是以下代码不起作用:

df = spark.createDataFrame(["10","11","13"], ("age"))

## ValueError
## ...
## ValueError: Could not parse datatype: age
Run Code Online (Sandbox Code Playgroud)

预期结果是:

age
10
11
13
Run Code Online (Sandbox Code Playgroud)

apache-spark apache-spark-sql pyspark

9
推荐指数
4
解决办法
1万
查看次数

带有来自 StringIndexer 的标签的 IndexToString 转换

如何IndexToString通过从 中获取标签来转换 using labelIndexer

labelIndexer = StringIndexer(inputCol="shutdown_reason", outputCol="label")

idx_to_string = IndexToString(inputCol="prediction", outputCol="predictedValue")
Run Code Online (Sandbox Code Playgroud)

python machine-learning apache-spark pyspark

3
推荐指数
1
解决办法
1251
查看次数