问pyspark write.parquet()创建一个文件夹，而不是parquet文件
EN

Stack Overflow用户

提问于 2020-08-26 12:03:01

回答 1查看 563关注 0票数 1

我尝试将pyspark数据帧写入到拼图中，如下所示

df.write.parquet("temp.parquet", mode="overwrite")

但它会创建一个名为temp.parquet的空文件夹，而不是创建一个parquet文件。什么可能会导致此问题？

回答已采纳

发布于 2020-08-28 17:43:27

我从here下载了hadoop.dll并将其添加到System32文件夹中，它解决了这个问题。

票数 0

页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持

原文链接：

https://stackoverflow.com/questions/63590319

复制

相似问题

问pyspark write.parquet()创建一个文件夹，而不是parquet文件EN