我正在尝试将数据帧写入 s3 中的单个文件,并在 pyspark 中使用所需的文件名。我能够在 scala 中执行此操作,但在 py 中给出以下错误
作者:Ronnie 提问时间:11/16/2023
我的 pyspark 代码尝试创建一个 DataFrame 并将 DataFrame 写入 s3 位置。完成此操作后,我将有一个名称为 part-*** 的文件,我正在尝试使用 hadoop 文件实用...
amazon-s3 问答列表
作者:Ronnie 提问时间:11/16/2023
我的 pyspark 代码尝试创建一个 DataFrame 并将 DataFrame 写入 s3 位置。完成此操作后,我将有一个名称为 part-*** 的文件,我正在尝试使用 hadoop 文件实用...
作者:chaosheld 提问时间:11/13/2023
我一直在使用 Amazon Athena 成功查询 Common Crawl 档案的索引,直到几周后它开始返回“服务:Amazon S3;状态代码:503;错误代码:SlowDown”。我 https...
作者:harman bhutani 提问时间:11/17/2023
在我的本地一切正常,但是当我在 AWS ECS fargate 上部署时。我在尝试从 JDK 11 迁移到 JDK 17 时收到此错误。我已经更新到 aws-java-sdk 的 recenet 版本...
作者:Tyron 提问时间:11/17/2023
您好,有一次,我在下图上收到错误。 人们上传图像,有时这个错误 我使用 Strapi 和 AWS S3,我检查我的请求,发送正确类型的数据,3 x 3 发送图片以减小 PUT 和 POST 请求的...
作者:Abhishek Chatterjee 提问时间:11/17/2023
我创建了一个 S3 存储桶,我的自定义域为“file.xyz.com”。我可以手动从存储桶上传文件。但是每当我尝试通过点击URL“file.xyz.com/dafodils.jpg”来查看文件时,我都...
作者:Mathias F 提问时间:11/17/2023
我有一个指向 S3 上的目标组的 EC2 负载均衡器。在该 S3 存储桶中有一个文件索引.html我可以通过“http://myserver.com/index.html”请求它。由于这是一个 SPA...
作者:Anton Kim 提问时间:11/17/2023
我正在尝试了解如何查看几年前上传并关联的 OpeanSearch 包的原始 s3 路径。 我在控制台中到处寻找并使用,但我找不到将当前包映射到其原始 s3 路径的方法。aws opensearch ...
作者:Anton Kim 提问时间:11/17/2023
我有一个现有索引,该索引是从另一个操作系统群集的快照创建的。在其索引设置中,它指的是存在于另一个操作系统集群中的软件包,我也将其安装在新操作系统中。 不幸的是,软件包 ID 是由 AWS 生成的,需要...
作者:knightcool 提问时间:7/3/2020
在检查像 pastebin 这样的服务的设计时,我注意到使用了两种不同的存储系统: 用于存储实际“粘贴”数据的对象存储(如 Amazon S3) 元数据存储,用于存储与该“粘贴”数据相关的其他内容;...
作者:Blu Ycw 提问时间:7/21/2023
我需要在不下载或保存的情况下获取上传到 s3 的 zip 文件中的图像文件名,这可能吗?目前,如果文件存储在本地,我只能做到这一点。 这是我的代码: $z = new ZipArchive(); ...