我需要一个工作流来通知客亚搏在线户数据交付已经准备好从S3 bucket下载。当前的过程包括FME云服务器上的几个工作区,从S3桶中提取媒体文件,同时生成FGDB和CSV特性记录,所有这些输出都保存在一个特定的FME服务器共享临时/目录的目录中,作为一个zip文件一起压缩并推送到目标,在这种特殊情况下,zip文件被推送到S3 bucket, S3 bucket通过NextCloud应用程序可用。
作为目前的临时解决方案,我正在使用一个工作区目录和文件路径名阅读器要读取zip文件并使用filecopy作家将文件压缩并移动/复制到共享的临时目录中。这个目标目录被配置为一个目录监视服务,以便监视CREATE,然后S3订阅服务将zip文件推送到S3 bucket。我想使用S3 bucket上的目录监视服务作为发送给客户的下载URL的通知。(我也可能修改这个工作空间,将其推到谷歌驱动器或SFTP目的地),但在所有情况下,我都希望生成一封电子邮件,该邮件提供最终目的地zip文件的URL,并通知客户可以下载该文件。
我想帮助理解的是,如何向客户设置一个电子邮件通知,即S3 bucket中的这个zip文件已经准备好下载,并且在该电子邮件通知中提供了下载的URL。
-这可以通过简单地使用数据下载服务来实现,还是应该使用电子邮件转换器创建一个工作区来引用S3 bucket并通过下载URL通知zip文件?
预先感谢你的帮助。
你好,
我有FME服务器2018.1.1.1 - Build 18578 - win64运行在一个Amazon EC2实例上,我想使用我公司的Amazon SES服务发送电子邮件。当使用电子邮件变压器时,我可以发送电子邮件没有任何问题。但使用完全相同的细节(主机,用户名、密码,港口,等)当我尝试设置电子邮件通知时,我只收到错误消息说“SSL错误发生了”。当尝试“SSL/TLS”选项时,确保连接安全和端口是正确的,以及“无法连接到电子邮件服务器”。尝试“StartTLS”选项时,请确保帐户和密码正确。
电子邮件转换器和通知设置屏幕之间的唯一区别是,我必须显式地将加密设置为TLS,以便电子邮件处理程序能够工作。但对于通知设置屏幕,我只能在“SSL/TLS”和“StartTLS”之间进行选择——不仅仅是TLS。
当我试图用Amazon se设置我的通知时,是否有任何日志文件可以让我找到更详细或更具体的错误?有没有办法显式地设置通知的加密,让它使用TLS而不是SSL,就像我必须做的让电子邮件转换器工作?我的FME服务器引擎服务运行的登录用户与其他FME服务不同,这就是问题所在吗?
Redshift是一个强大的基于列的数据仓库,但需要进行一些调优才能充分发挥其潜力。最重要的组件之一是排序和分布键的选择。
目前,Redshift编写器允许创建表(如果不存在),但是不扩展传统的SQL语句来创建排序和分布键。
请求REDSHIFT写入器上的一个额外选项,以便在写入器创建表时允许选择排序和分布键。
红移排序键:
https://docs.aws.amazon.com/redshift/latest/dg/c_best-practices-sort-key.html
红移Dist密钥:
https://docs.aws.amazon.com/redshift/latest/dg/c_best-practices-best-dist-key.html
你好,
我正在尝试访问S3 bucket,但需要使用代理来访问它。
当我添加我的代理(在firefox和其他应用程序中运行良好)时,FME似乎没有通过它发送任何流量——我在运行一个流量日志,当它被调用时,我没有看到任何内容。
对于如何让S3工作,有人有什么建议吗?
谢谢你!
奥利弗
嗨。
我尝试了一个简单的任务,从S3下载csv文件并将其转换为shapefile。
我可以用S3 Downloader下载文件,然后用StringSearcher将范围缩小到目标CSV文件。然后,我使用了FeatureReader来读取目标CSV,但是我不能通过这个过程在CSV文件中添加任何属性。我希望公开所有属性,包括纬度和经度。然后我想从那些具有所有属性的lat & long生成几何图形。
当我运行上面的工作区时,然后我没有像下面这样的属性。但这个过程本身是成功的。
这是我正在处理的原始CSV表。
当我用一个本地csv文件创建一个Creator- FeatureReader工作亚搏在线流时,我没有任何问题来包含(公开)所有属性。
为什么我从S3下载csv文件时丢失了所有属性,而本地csv文件却没有?我错过了什么?
请给我一些建议!
谢谢你!
@hirooimaki
你好,希望是一个快速的,但我不清楚。我已经将S3映射到FME Cloud -中的resources文件夹
https://xxxxxx.fmecloud.com/fmeserver/#/resources/browse/rasters
我如何在工作区中引用这个文件夹,我不能使用
FME_SHAREDRESOURCE_TEMP或FME_SHAREDRESOURCE_DATA
我应该使用什么FME服务器参数?
非常感谢
奥利弗
大家好!我希望我的问题能被清楚地理解。
我有一个工作空间,可以从Postgres数据库中的多个表生成单个列表CSV的照片,每个桶都有一个UUID来标识它。它是这样的:
屏幕-射- 2018 - 07 - 92943 am.png - 23
此列表输出到FME服务器上的(FME_SHAREDRESOURCE_DATA)目录,然后我想调用它,并使用它来解析S3 bucket中的照片,并将它们移动到另一个S3 bucket中。我需要使用云/服务器资源,因为这些照片的总大小可以达到多个GB,这会在我的office WAN上造成太多的延迟。
How can I achieve this using the S3 transformers offeredwith FME to move objects between S3 buckets without downloading the photos locally?Or is this even possible in a single or multiple workspace(s)?
我还需要对视频文件执行此操作。
预先感谢您的帮助。
托德
发生了什么?我们有谋杀案吗?——没有了?
我们是否可以添加获取S3(可能作为一个选项)提供的S3对象元数据的功能(更多的信息在这里)作为S3ObjectLister变压器的一部分?
我正在努力让出版物在AWS RedHat实例上工作。我打开了端口7125,服务器不关心我是否发送电子邮件-这些最终返回与这个smtp错误:
诊断标准:smtp;收件人服务器不接受我们的连接请求。
I am looking at email.properties in a FME 2016 installation where email publication works and it has this in it:
远程管理器连接信息
EMAILRM_HOST = localhost
EMAILRM_PORT = 4555
EMAILRM_USER =根
EMAILRM_PASSWORD = * * * * * * * * * *
我想知道这是否有关联。
到目前为止,我已经尝试了端口7125(默认值)和端口25(万福玛利亚)。两者在AWS中都是开放的,但是,使用这两种配置都运行时,我只能坐在那里悲哀地看着主题监视,最终在发送电子邮件服务器最终放弃时收到通知。
如果你听起来很熟悉anhy,请插嘴,我不知道下一步该怎么办。
谢谢,
Fuad。
这就跟你问声好!
我在Amazon EC2上安装了一个Ubuntu 16.04虚拟机,并在那里安装了FME。由于兼容性问题,在建立VM的远程连接时,我不可能获得GUI。我在另一台计算机上开发了一些FME工作区,并希望在Ubuntu VM上运行它们。由于其中一个工作区使用了ArcGIS在线阅读器,我需要向FME安装添加一个web连接。
然而,到目前为止,我还没有找到在没有GUI的情况下实现这一点的方法。可以通过命令行添加web连接吗?或者我可以从另一台计算机(使用GUI)在FME安装中添加web连接,并将特定的配置文件复制到另一台安装中吗?
预先感谢您的任何建议!
问候,
安德烈
如果FME在文件下载时就开始读取,而不是等待整个文件下载后再读取,那就太好了。特别是对于S3上的大文件。
我们可以将S3Watch发行者配置为每x分钟/小时/等轮询一次,但是我们不能指定每天什么时候进行民意测验。如果能让出版商在特定的时间进行民意调查,那就太好了。中午和午夜。
支持从/到terraform和cloudforation模板的转换,以及AWS / Azure Cloud中的当前状态