您知道如何覆盖文件夹中的某些分区,而其他分区保持不变吗?
如果您的数据框仅包含您想要覆盖的分区中的数据,那么您需要设置spark.sql.sources.partitionOverwriteMode为dynamic(也请查看此处)。
spark.sql.sources.partitionOverwriteMode
dynamic
本文收集自互联网,转载请注明来源。
如有侵权,请联系 [email protected] 删除。
点击生成二维码
我来说两句