是否可以使用 Pentaho 将文件从 S3 存储桶的一个文件夹移动到 S3 存储桶的另一个文件夹?

Is it possible to move files from one folder of S3 bucket to the other folder of S3 bucket by using Pentaho?

提问人:madhu sogam 提问时间:10/26/2023 最后编辑:Rishu Smadhu sogam 更新时间:10/27/2023 访问量:34

问:

我正在尝试搜索一个组件,该组件可以帮助我在 Pentaho 数据集成中将文件从一个 S3 存储桶文件夹移动到另一个文件夹。

亚马逊-S3 Pentaho

评论


答:

0赞 Rishu S 10/27/2023 #1

是的,您可以使用 Pentaho 中的 Python Executor 步骤编写 python 脚本来调用 AWS boto 库并将数据从一个文件夹复制到另一个文件夹。

0赞 Tatchai S. 10/27/2023 #2

您可以使用 Pentaho 将文件从 S3 存储桶的一个文件夹移动到 S3 存储桶的另一个文件夹。

  1. 您需要设置 VFS 连接。您可以按照文档中的步骤设置 AWS S3
  2. 设置 VFS 后,您可以使用作业中的“Hadoop 复制文件”步骤来复制文件,或者如果要移动文件,可以在“设置”选项卡中选中“删除源文件”

s3-1

s3-2