主题“数据上传”中的问题 https://knowledge.亚搏在线safe.com/questions/topics/single/523.html网站 “数据上传”主题的最新问题 FME服务器API和数据上传 https://knowledge.亚搏在线safe.com/questions/76724/fme-server-api-and-data-upload.html

您好!

我在当前使用数据下载服务的FME服务器(云)上有一个工作区。它要求用户上载.csv和.pdf,然后它运行一个翻译并提供一个.kmz和一个geotiff文件夹。

我想使用对RESTAPI的调用来运行这个工作区。我正在努力想办法把2个文件作为一部分上传。提交打电话。假设我能做到,呼叫是否仍会触发数据下载?还是需要写入共享资源文件夹?

感谢您的帮助,谢谢。

数据下载 服务器 数据上传 周一,2018年8月20日16:09:06格林尼治标准时间 半导体激光器
如何上传压缩文件并运行工作区? https://knowledge.亚搏在线safe.com/questions/63644/how-to-upload-zip-archive-and-run-workspace.html

我想创建一个HTML/javascript站点,让用户上传一个压缩文件,并开始在FME服务器上处理这个文件。工作流与亚搏在线我在这里找到的示例非常相似:https://playground.fmeserver.com/javascript/server-uploads/upload-file-in-session/
使用这个示例中的代码,我可以上传档案(参见屏幕截图)。我还检查了FME服务器上的资源,对我来说,一切似乎都是正确的——归档文件按我的预期上传到一个临时文件夹中。然而,它不能被“识别”为正确的输入文件,当点击“用数据运行工作区”时,我会收到一条错误消息,说“没有上载任何文件”。请上传一个文件。“

我已经找到建议将“opt-extractArchive”的参数值从“false”更改为“true”,但这对我没有任何帮助。
如有任何帮助,我们将不胜感激:—)

休息API 数据上传 JavaScript 清华大学,2018年2月8日11:07:41格林尼治标准时间 凯特丽娜
如何在FME服务器中通过数据上传上传一个zip文件和两个其他参数(需要输入)(项目名称)和电子邮件(直接URL)? https://knowledge.亚搏在线safe.com/questions/48547/how-can-i-upload-a-zip-file-and-two-other-paramete.html

压缩文件 数据上传 周一,2017年7月24日15:23:29格林尼治标准时间 马约德尔普林
我可以通过HTTP Post上传一个文件和一个FME云服务,并将其用作读者源吗? https://knowledge.亚搏在线safe.com/questions/45183/can-i-upload-a-file-a-an-fme-cloud-service-via-htt.html

大家好

我已经读过相关的话题,还需要澄清。我想做的是通过HTTP Post启动JobSubmitter服务,并使用通过Post上载的文件(csv或shape文件)作为服务中阅读器的源数据。我正在使用邮递员进行测试,这正是我要发布的内容:

这个文章声明不能在正文中使用表单数据,只有原始数据。这是否意味着我使用的方法不起作用,或者有人设法让它起作用了?如果可能的话,如何设置文件上载将上载到的FME云位置?

如果这种方法不可行,我正在考虑使用上载服务上载文件,然后在上载到达FME云中的目标文件夹时运行工作区(通过通知启动进程)。

任何其他建议都是最受欢迎的。

谢谢

罗布

数据上传 邮递 结婚,2017年5月31日01:36:12格林尼治标准时间 瑞凯
S3uploader:上传日志传输状态 https://knowledge.亚搏在线safe.com/idea/37169/s3uploader-log-transfer-status-of-uploads.html

如果您想查看转移状态(例如%完成)使用S3uploader上传时。当我用S3uploader上传大文件时,我没有任何迹象表明我的FME工作台是否停止或是否正在进行中!

如果AWS不使用端点提供此信息,则可能无法实现此增强。

日志文件 亚马逊网络服务 数据上传 结婚,2016年11月30日19:37:28格林尼治标准时间 法梅扎德
在FME数据检查器中填充的所有行,但在写入Excel Speadsheet时不会 https://knowledge.亚搏在线safe.com/questions/36831/empty-rows-in-excel-电子表格-after-data-are-wri.html

你好,

当我在FME数据检查器中检查我的数据时,我拥有所有的行,但是,当我将数据写入Excel电子表格时,我有很多空行,并且填充了一些行。

有人面临同样的情况吗?

谢谢。

雅各布

擅长 数据上传 其他 结婚,2016年11月23日17:20:09格林尼治标准时间 雅各布1
Salesforce编写器删除属性 https://knowledge.亚搏在线safe.com/questions/34434/salesforce-writer-dropping-attributes.html

大家好,

我给Salesforce写信有困难。我了解在使用Salesforce批量API加载数据之前,FME会将这些特性写入临时的csv文件。我遇到的问题是,在写csv文件时,fme会删除字段。特殊性,FME正在删除Salesforce应用程序中所需的ID字段。此ID字段是主细节数据类型(1:n父子关系),设置为读/写。

令人沮丧的是,如果我将记录导出为csv字段,然后手动上载它们,它很好用。日志文件和帮助也相当无用。

谢谢,

大卫

数据库 作家 数据上传 FRI,2016年9月23日08:12:32格林尼治标准时间 杰麦克德莫特
压缩文件数据上载 https://knowledge.亚搏在线safe.com/questions/30262/zip-file-data-uploads.html

使用开发者操场,有一个上传文件的例子

http://playground.fmeserver.com/javascript/server-…

我还没弄清楚的是,为什么不上传zip文件?

谢谢你的帮助

压缩文件 数据上传 FRI,2016年6月24日19:07:38格林尼治标准时间 托德斯戴维斯
限制数据上载文件格式 https://knowledge.亚搏在线safe.com/idea/23334/limit-data-upload-file-format.html网站

现在,FME服务器和FME云允许用户上传(或从资源中选择)他们想要的任何文件作为源数据集,例如。如果我用图形阅读器设置了一个工作区,但是用户上传了一个dxf文件,那么它将失败,并出现一些可怕的错误消息。这对用户不太友好。

我想看到的是一个选项,禁止上传/选择不支持的文件类型,桌面版本目前正在做的事情。它仍然可以被规避,但这可以防止许多意外事件。

数据上传 FRI,2016年2月12日13:45:05格林尼治标准时间 红色地理
FME服务器组件的热故障转移 https://knowledge.亚搏在线safe.com/idea/19235/warm-failover-of-fme-server-components.html 耐久性。能够对FME服务器核心组件进行热故障切换,保证99.9999%的正常运行时间。 数据上传 清华大学,2015年10月29日15:51:08格林尼治标准时间 惠特 限制可与工作区一起上载的文件的大小。 https://knowledge.亚搏在线safe.com/idea/19045/limit-size-of-files-that-can-be-uploaded-with-a-wo.html 数据上传 清华大学,2015年10月29日格林尼治标准时间15:35:19 法梅扎德 替换重复上载同名工作区的选项 https://knowledge.亚搏在线safe.com/idea/19009/replace-option-for-uploading-workspaces-with-the-s.html 上传同一个命名的工作区有时似乎不做任何更改。(可能是缓存的?)当前的解决方法是-将工作区重命名为其他名称。重新启动FME GUI会话重新登录(比第一个选项慢),以便从桌面上传到FMEServer中的“替换”选项可以强制更改…到同一个工作区。可能是替换,附加或修改模式选项?如果可能的话。 网络用户界面 数据上传 清华大学,2015年10月29日15:35:15格林尼治标准时间 法梅扎德 数据上载,验证,实时显示 https://knowledge.亚搏在线safe.com/articles/1463/data-upload-validation-and-real-time-display-1.html

下载

现场演示γ下载数据γ吉瑟布上的叉子

介绍

这个例子演示了如何使用FME服务器创建一个Web应用程序,允许用户通过电子邮件或上传数据到服务器,然后由服务器验证数据。将数据加载到Postgres数据库中,向用户发送带有验证结果的电子邮件(或在上载时显示这些结果)。并在应用程序中更新实时数据显示。
Web应用程序的屏幕截图

工作原理

组件

此实时演示使用通知服务的组合,PostgreSQL数据库触发器,以及FME服务器的内置WebSocket功能。更多信息,请参阅以下内容:

亚搏在线

当电子邮件发送到服务器时,电子邮件发布者接收消息并将电子邮件数据发布到服务器上名为cad_waterqa的通知主题。

然后触发订阅该主题的推送订阅并运行控制器工作区,将通知内容作为该工作区的源数据发送给它。

控制器工作区读取通知内容并解析出它需要的信息(发件人电子邮件地址,所附CAD文件的位置,等)。然后它会运行验证子工作区。

验证工作区执行以下操作:

  • 读取文件并执行验证步骤
  • 如果文件未通过验证,它创建文件中发现的问题的HTML报告
  • 如果文件通过验证,工作区将把这些特性加载到Postgres数据库中。

根据验证工作区的成功情况,然后,控制器工作区将:

  • 向cad_waterqa_success主题发送通知,该主题将向原始发件人发送报告成功的电子邮件,或
  • 向服务器上的cad_waterqa_fail主题发送通知,然后向原始发件人发送包含HTML报告的电子邮件。

如果是直接上传,仅运行验证工作区,结果报告将通过网络应用程序下载。

在Postgres数据库表上设置触发器,以便在每次向表中插入新行时运行。该触发器运行一个函数,该函数获取传入功能的ID,并通过HTTP POST请求将其发送到服务器上的另一个工作区。

该工作区采用功能ID,从Postgres数据库读取特征几何,然后发送到FME服务器的websocket组件。

然后,WebSocket服务器接收这些数据并将其转发到Web应用程序中的地图显示,并动态地将这些功能加载到页面上。

自己试试看

链接的zip文件包含所有工作区和SQL脚本,您将需要这些工作区和SQL脚本来让这个演示在您自己的系统上工作。这是本演示的存档版本,使用Oracle和WebSocket服务推送器。它不再被维护,但可供FME Server 2013的用户使用。

1。建立数据库

运行中包含的SQL脚本后格雷斯文件夹:

  1. 使用创建一个SQL创建存储通过验证的CAD数据所需的表
  2. 使用创建触发器.sql将触发器添加到刚刚创建的数据库表中。注意:您需要更改HTTP Post URL中的主机名。
  3. 使用创建函数.sql要创建一个可以发出HTTP请求的helper pl/python函数,并创建一个pl/pgsql函数,在FME服务器上提交websocket流作业。

有关数据库触发器和FME的其他信息,请参阅使用触发器将数据从数据库中实时推出到FME服务器

2.第2条。设置FME服务器

通知

创建以下主题:

  • 计算机辅助设计
  • cad_waterqa_失败
  • Cad_Waterqa_成功

创建电子邮件发布者:

  • 使用来自的信息文件设置服务器接收电子邮件
  • 发布服务器设置:
    • 电子邮件用户名:cad_waterqa
    • 发布主题:Cad_Waterqa

创建两个电子邮件订户:

  • 对于失败主题:
    • 订阅主题:cad_waterqa_fail
    • 电子邮件模板:订户内容
  • 关于成功主题:
    • 订阅主题:cad_waterqa_success
    • 电子邮件模板:订户内容

工作空间

准备validate-subworkspace.fmw

  1. 更改工作区中的私有参数,以便为自己的Postgres数据库使用正确的登录。
  2. 发布到服务器
    • 存储库名称:验证
    • 服务:作业提交者

准备cad-upload.fmw

  1. 更改工作区中的私有参数,以便为您自己的FME服务器使用正确的登录。
  2. 如有必要,更改两个fmeservernotifier transformers中的web连接url参数
  3. 更新fmeserverjobsubmitter以指向您的fme服务器的validate-subworkspace.fmw版本。
  4. 将工作区发布到服务器
    • 存储库名称:验证
    • 服务:作业提交者


准备websocket-stream.fmw

  1. 更改工作区中的私有参数,以便为您自己的Postgres数据库和FME服务器使用正确的登录。
  2. 还要检查以下变压器中的参数是否与您自己设置的匹配:
    • 特技演员
    • WebSocketSender
    • FMEServerJobSubmitter(FMEServerJobSubmitter)
    • SQL执行器
  3. 将工作区发布到服务器:
    • 存储库名称:验证
    • 服务:作业提交者

有关内置WebSocket服务器的详细信息,请看WebSockets和FME服务器

准备reset-postgis-table.fmw

  1. 调整用于sqlcreator转换器的postgres连接参数
  2. 将工作区发布到服务器:
    • 存储库名称:验证
    • 服务:作业提交者

安全

除上述步骤外,您需要确保在FME服务器上设置了适当的权限。默认情况下,来宾用户需要具有运行重置工作区的权限,因为它直接从网页链接到。此外,WebSocket流式工作区需要从数据库运行,所以它要么由客人运行,或者对其他用户帐户使用令牌身份验证。

三。建立网页

  1. 编辑web文件夹中的global_var.js文件,并更改服务器连接变量以匹配您自己的服务器配置。
  2. 将网页(整个“www”文件夹)发布到Web服务器或在Web浏览器中打开index.html
数据库 通知服务 实时 电子邮件 订户 出版商 数据上传 网络套接字 星期二,2015年10月13日16:54:49格林尼治标准时间 劳拉塔保险箱亚搏在线
使用FME服务器加载数据选项 https://knowledge.亚搏在线safe.com/articles/1293/data-loading-with-fme-server.html网站

介绍

FME服务器的数据加载功能允许用户从几乎任何来源获取数据,并自动将其直接加载到数据库中。在背景中,数据加载本身是一个两步过程。第一,用户可以访问FME服务器上的工作区,然后,该工作区以该数据为源并将其写入最终输出位置。这个过程可以通过Web服务或通知服务来处理。

使用Web服务加载数据

为了允许将数据读取到工作区中,必须发布读卡器上的源数据集参数。工作区发布到FME服务器后,您的用户可以拖放文件,在本地或服务器上浏览并选择文件,或者甚至提供Web服务的URL,使工作区内的读卡器可以访问数据。

通过Web表单上载数据
这种数据加载方法利用数据上传服务,允许用户将数据推送到FME服务器。使其可用作工作区内的源数据集。用户可以通过FME服务器Web用户界面或自定义网页与数据上传服务进行交互。

有关数据上传服务的详细信息,请参阅以下文档:FME服务器数据上传服务.有关通过Web界面上载数据和创建自己的数据上载网页的一些实用示例,尝试本教程:使用FME服务器上传数据

使用来自Web服务的数据
而不是让您的用户上传要加载的数据,可以将FME服务器上的工作区配置为直接从URL读取数据。发布源数据集时,您需要做的只是提供链接作为源数据集,读卡器将直接从该位置获取数据。

有关直接从Web服务使用数据的详细信息,在这里查看教程页面:从URL读取数据.

将数据发布到FME服务器Web服务
使用FME加载数据的另一个选择是直接将其发布到FME服务器,并触发一个工作区以将该数据作为其源数据集读取。这意味着不是告诉FME在哪里找到源数据集,您只需将数据本身直接发送到FME服务器上的工作区。

查看以下教程,了解更多有关此操作的信息,以及如何在FME服务器上配置工作区以接受此类型的输入:使用HTTP POST将源数据发送到FME服务器

使用通知服务加载数据

通知服务可用于以消息的形式将数据推送到FME服务器。这些消息可以通过多种方式发送到FME服务器,包括通过HTTP POST,通过发送到服务器的电子邮件,或者当特定目录中的数据被更新时。

在通知消息中发送数据
使用通知服务,您可以向FME服务器发送包含任何类型信息的消息。例如,您可以发送一条JSON消息,其中包含一个数据集的位置,该数据集可以装载到一个集中的数据库中,并使用诸如JSonFlatener和FeatureReader之类的转换器来提取文件路径,然后读取数据。或者,只需配置一个传感器,以文本形式直接向FME服务器发送更新,并根据更新中的信息启动其他FME过程。

有关在FME服务器中发送和接收通知的更多信息,请看这篇文章:接收,正在检查,和处理通知消息

通过电子邮件将数据发送到服务器
可以将FME服务器配置为接收电子邮件,然后将电子邮件的内容(包括任何附加文件)以JSON格式传递到工作区。有关FME服务器电子邮件功能如何工作的信息,请参阅以下文章:FME服务器中的电子邮件:教程系列

有关如何配置FME服务器接收电子邮件和设置工作区以处理相应通知消息的更具体信息,尝试以下开始的接收电子邮件教程:接收电子邮件,第1部分:设置主题和电子邮件地址

监视目录并加载新数据集
简化数据加载过程的另一个选项是通过目录观察发布服务器(FME 2014通知服务的新添加)。它可以设置为主动监视共享资源或其他目录上的活动,并在添加文件时发送消息,更新,或删除。

为了自己试试这个,请看下面的演示:目录监视教程

通知服务 电子邮件 网状物 目录表 HTTP协议 数据上传 FRI,2015年10月9日19:31:42格林尼治标准时间 劳拉塔保险箱亚搏在线
easygeocoder-数据驱动的自助数据转换 https://knowledge.亚搏在线safe.com/articles/1116/easygeocoder-data-driven-self-serve-data-transform.html

现场演示γ下载数据γ吉瑟布上的叉子

概述

EasyGeocoder演示是一个如何使用FME服务器创建动态“数据驱动”工作流的示例,该工作流可以使用有关输入数据集的信息来提供运行数据转换的选项。亚搏在线这个示例应用程序允许用户上传自己的csv文件进行地理编码。它使用一个多步骤流程,首先使用工作区扫描csv文件,以获取文件中存在的列的列表,然后使用这些信息为用户提供选项,以选择哪些列对应于必要的地理编码字段。最后,Easygeocoder将把这些信息提交到第二个工作区,该工作区将运行geocoding过程并将结果流式传输到Web地图。

演示页

工作原理

这个演示由两个工作区和一个调用FME服务器的javascript Web表单提供支持。以下是运行演示所涉及的过程和步骤的概述:

  1. 显示给用户的初始页面调用数据上传服务添加文件时。这会将文件放在后端FME服务器实例上。
  2. 文件上传后,工作区(发布到FME服务器并注册到数据流服务)以该csv文件作为输入并使用模式读取器扫描该文件的运行。结果是输入csv的所有属性(列名)的列表。然后,工作区使用JSontemplater和文本文件编写器的组合来创建包含该列表的JSON字符串。
  3. Web应用程序运行第一个工作区后,它接受从它返回的JSON字符串。然后,它使用这些信息填充一组下拉菜单,对应于第二个工作区(也发布到FME服务器)中存在的每个发布参数,这些工作区将执行实际的地理编码。这些下拉菜单替换了初始页面上的文件上载小部件。
  4. 当用户单击geocode按钮时,Web应用程序将收集他们在下拉菜单中选择的信息,并将这些条目作为发布的参数提交到地理编码工作区。
  5. 在这种情况下,geocoding工作区将其输出写入geojson文件,并已在数据流服务中注册。因此,它将把创建的geojson文件直接返回到Web应用程序。
  6. 然后,Web应用程序将使用来自工作区的这个geojson输出,这次将把这些功能覆盖到Web地图上,并直接在Web浏览器中显示地图。

你可以试试演示的实时版本看看源代码让Web应用程序了解如何直接使用对FME服务器工作区的调用来生成动态内容。单击以下链接可查看FME服务器REST APIFME服务器JavaScript API电话。

网状物 数据流 吉森 数据上传 网络地图 清华大学,2015年10月8日19:15:27格林尼治标准时间 劳拉塔保险箱亚搏在线