Kyl*_*est 8 activerecord etl model ruby-on-rails data-integration
我正在研究ETL工具,将平面文件导入数据库,然后导出xml文件.
许多工具支持生成在应用程序中使用的代码; 但是,我还没有找到任何支持使用您的应用程序中已有的代码.我们的模型很复杂(关系,验证,多态关联,回调等).
有哪些工具可以重用现有代码?或者我是否在ETL工具中重新创建(并维护)我的模型?
注意:我对ETL的要求(与批量插入或activerecord-import相反)是转换.我们收到来自200多个不同来源的数据,包括各种格式,完整程度和清洁度.此外,对于将要定义转换的技术较少的用户来说,"设计师"最常用的包含更为真实.
ActiveWarehouse可能证明是有用的.初步搜索结果使项目感觉有点陈旧和失效.一点点挖掘在GitHub上产生了一个相当活跃,记录良好的项目分支:https://github.com/activewarehouse/activewarehouse-etl