sparksql跑数据Failed with exception java.io.IOException:org.apache.parquet.io.ParquetDecodingExceptio

错误信息：

Failed with exception java.io.IOException:org.apache.parquet.io.ParquetDecodingException: Can not read value at 0 in block -1 in file oss:/xxxxxxxxxx.snappy.parquet

修改方式：

在运行spark-sql前 添加这样一句话：

spark.conf.set(“spark.sql.parquet.writeLegacyFormat”,”true”)

这样就能跑成了。

本文来源 爱码网，其版权均为 原网址 所有 与本站无关，文章内容系作者个人观点，不代表 本站 对观点赞同或支持。如需转载，请注明文章来源。