求一款类是ETL的获取数据转换程序

问题是这样的:

主要是服务商会提供一个API, 这个API每时每刻都在更新数据, 我们需要将这个数据定时的取出来,按照条件将字段转换成我们可用的字段,然后存储到数据库中。
这个需要按照计划去运行,主要用在Linux端

kettle 这个我试了, 并不理想

求一款类是ETL的获取数据转换程序
这个图是基本流程

大佬们, 有没有这样的软件推荐

大佬们,收费的开源的,都可以, 主要是时间紧,没时间开发。
有是最好, 没有就只能去开发了。

《L03 构架 API 服务器》
你将学到如 RESTFul 设计风格、PostMan 的使用、OAuth 流程,JWT 概念及使用 和 API 开发相关的进阶知识。
《L05 电商实战》
从零开发一个电商项目,功能包括电商后台、商品 & SKU 管理、购物车、订单管理、支付宝支付、微信支付、订单退款流程、优惠券等
讨论数量: 5
曾是然

最近也有这个需求,尝试了一下 NIFI,感觉还不错

1周前 评论
wuliqiang (楼主) 1周前

之前用的就是kettle 感觉还不错啊

1周前 评论
wuliqiang (楼主) 1周前
huxiaochu (作者) 1周前
wuliqiang (楼主) 1周前

canal 一类自己封装也可以啊

1周前 评论
wuliqiang (楼主) 1周前

@dinosaur 没时间啊,有现成的,就不用开发了

1周前 评论

讨论应以学习和精进为目的。请勿发布不友善或者负能量的内容,与人为善,比聪明更重要!