在 PySpark 数据框中修剪字符串列 [英] Trim string column in PySpark dataframe
本文介绍了在 PySpark 数据框中修剪字符串列的处理方法,对大家解决问题具有一定的参考价值,需要的朋友们下面随着小编来一起学习吧!
问题描述
从 CSV 文件创建 Spark DataFrame 后,我想修剪一列.我试过了:
After creating a Spark DataFrame from a CSV file, I would like to trim a column. I've tried:
df = df.withColumn("Product", df.Product.strip())
df
是我的数据框,Product
是我表中的一列
df
is my data frame, Product
is a column in my table
但我收到错误:
Column object is not callable
有什么建议吗?
推荐答案
from pyspark.sql.functions import trim
df = df.withColumn("Product", trim(col("Product")))
这篇关于在 PySpark 数据框中修剪字符串列的文章就介绍到这了,希望我们推荐的答案对大家有所帮助,也希望大家多多支持IT屋!
查看全文