我无法在pyspark中生成ANSI文件

I can't generate an ANSI file in pyspark

提问人:Flávio Sotto 提问时间:10/5/2023 更新时间:10/5/2023 访问量:15

问:

我正在尝试生成一个使用 ANSI 编码的 txt 文件,但是当我将文件上传到 AWS S2 存储桶时,结果是一个 UTF-8 文件,使用 jupyternotebook 中的 ERM 集群执行此操作。 当我在本地运行相同的代码时,我会生成一个完美的 ANSI 编码的 txt 文件。 事实证明,没有选项可以在本地生成它,然后将其上传到云端,因为这将通过 Airflow 中的 DAG 生成。 我使用“cp1252”和“latin-1”编码尝试了这个,它在本地工作正常,但在云上不行。 有没有人见过类似的东西?

我正在尝试生成一个使用 ANSI 编码的 txt 文件,但是当我将文件上传到 AWS S2 存储桶时,结果是一个 UTF-8 文件,但我需要一个 ANSI 文件,该代码在本地工作,但不在云中工作。

amazon-web-services pyspark jupyter-notebook txt ansi

评论


答: 暂无答案