span8
span4
你好!
我正在连接一些数据和包含在不同的CSV文件中的信息。对于这个连接,我使用DatabaseJoiner。因为它是相当大的CSV文件(> 7M条目),所以在实际进行连接之前,创建索引需要一些时间。
然而,由于输入数据也很大,我正在通过tiles处理连接,但这意味着对于每个tiles, DatabaseJoiner在连接之前会再次创建自己的索引,等等……
它是一个参数或其他东西写在某处这个创建的索引,使它只需要再次读取它,以用于其他瓷砖?
很多谢谢!
尼古拉。
@nmatton我同意@arnovananrooij-我认为阅读CSV和使用FeatureJoiner会给你更好的结果。在较新版本的FME(2018及更高版本)中,CSV阅读器使用批量模式进行读取,速度非常快。FeatureJoiner使用相同的批量模式技术。在某种程度上,FeatureJoiner替代了老的FeatureMerger transformer。数据库Joiner对每个输入特性都进行查询,这样可以将700万个查询返回到CSV中(但是使用的内存资源更少!)这篇文章合并或连接电子表格或数据库数据可以帮助您决定哪个是最合适的连接转换器。
但我会尝试CSV reader + FeatureJoiner在FME 2018或更高版本(64位)
©2019安全亚搏在线软件公司法律