旧金山新etl作业平台初探

为了实现旧金山市和县提高旧金山官方开放数据门户（SF OpenData）数据集数量和及时性的目标，其中一个策略是“开发我们的程序，使数据的发布自动化”。为此，团队的技术人员设计并部署了一个etl作业平台，该平台突出了fme技术的特点。本次演讲将着重介绍旧金山对fme的历史性使用，改进etl作业平台的动力，新平台的设计和架构，以及对平台未来的一些思考。对于那些组织正在考虑是否进行企业级工作以自动将其数据发布到开放数据门户的与会者来说，这一讨论将是他们最感兴趣的。