评论和答案为“我如何使用CSV列表S3桶之间移动文件?” https://knowledge.亚搏在线safe.com/questions/74930/how-do-i-use-a-csv-list-to-move-files-between-s3-b.html 对于这个问题的最新意见,并回答“我如何使用CSV列表S3桶之间移动文件?” 评论由tjpollard上tjpollard的答案 https://knowledge.亚搏在线safe.com/comments/75018/view.html @GerhardAtSafe ,感谢这个信息。我想我会去临时磁盘路线,只是增加磁盘的大小来运行这些作业至少,因为我们的云实例所需的升级反正。但使用HTTPCaller,是一个的另一种选择我可能要尽快申请。再次感谢。托德结果 星期二,2018年7月24日18时43分55秒GMT tjpollard 通过gerhardatsafe回答亚搏在线 https://knowledge.亚搏在线safe.com/answers/74980/view.html

@tjpollard

你是正确的。如果你使用FME云和S3变压器你需要确保的FME云实例有足够的磁盘空间来下载这些文件,他们将被写入第二S3桶之前。由于 @redgeographics 已经正确提到的,文件上传到第二桶将出站数据传输这将收取(每GB $ 0.13,入站数据是免费的)。照片如果你选择这种方法,我会建议使用FME云实例的临时磁盘,以确保您可以减少磁盘的大小再次,一旦你完成。下面是一些关于临时磁盘资讯

下面是一个简单的例子。

在的情况下,你考虑使用AWS S3 REST API你应该看看 HTTPCaller 。这是一个REST客户端,让您与REST API进行交互。它看起来就像你不能使用AWS Web连接进行身份验证,所以你需要寻找到的身份验证请求和设置正确的认证头的REST请求。

我不太熟悉的AWS S3 REST API,所以我不 sure how hard it is to set up the correct calls for your transformation.

I hope this helps

星期二,2018年7月24日0时04分45秒GMT gerhardat亚搏在线safe
评论由tjpollard上tjpollard的答案 https://knowledge.亚搏在线safe.com/comments/74941/view.html 谢谢你的快速反应@redgeographics。搜索结果跟进多一点澄清,如果我使用S3变压器,且由FME云托管在我的FME服务器实例的工作空间,我想我的服务器资源分配到发动机的限制和记忆力,我有点熟悉,从各种日志文件的审查。搜索结果的另一个问题是关于亚马逊S3 REST API,是有办法使用,在工作区?点击
星期一,2018年7月23日15:11:23 GMT tjpollard
通过redgeographics回答 https://knowledge.亚搏在线safe.com/answers/74933/view.html

附带FME的S3变压器都可以使用,特别是S3Downloader和S3Uploader但会使文件穿过服务器,所以在数据传输和出

可替换地,<一HREF =“https://docs.aws.amazon.com/AmazonS3/latest/API/Welcome.html”目标=“_空白”>亚马逊S3 REST API 报价工具桶之间进行复制的对象,想必这确实不涉及双倍数据传输。 星期一,2018年7月23日14点20分05秒GMT redgeographics