我想在数据框中添加来自其他数据框中的值的新列。我的新列名是一个变量,我无法对其进行硬编码。
new_column = "my_new_column_name"
df = df.assign(new_column=other_df['Column1'].values)
Run Code Online (Sandbox Code Playgroud)
问题在于,我正在获得一个名为的新列new_column
。我期望的是一个名为my_new_column_name
任何人都可以提出解决方案。
如何从 python 脚本关闭 pyspark 日志记录?请注意:我不想对 Spark 记录器属性文件进行任何更改。