在 pyspark 中读取 csv 时避免列值溢出到其他列

Answer 1

我通过添加以下选项使其工作 -

df=spark.read.format("csv").option("header",True).option("inferSchema",True).option("multiLine",True).option("quote", """ ).option("escape", """).load("2023-08-31.csv")