[讨论] api到db的定期资料串流

楼主: ms0344303 (我不玩了)   2022-04-13 11:41:44
如标题
敝人有一个case需要定期从某个api取得资料 稍微处理 并塞入到指定db中
同时往后有其他api资料来源的话因为格式可能不同
需要做针对异质资料来源其他处理模组 整合成统一格式再塞入
简单来说就是整合异质资料并同质化的data loader
除了用比较土炮的爬虫脚本服务化之外
还有比较好用的方式吗
企业方向的解决方案也可?
感谢
作者: MOONY135 (谈无欲)   2022-04-16 21:35:00
这种东西不会有企业解决方案 自己写吧
楼主: ms0344303 (我不玩了)   2022-04-17 10:28:00
后来找到了 一堆公司在做这个...airbyte hevodata fivetran 国产也有netpro...还有免服务器企业托管订阅机制
作者: yaurtusn (擎天岗小牛)   2022-06-03 10:18:00
一窝蜂

Links booklink

Contact Us: admin [ a t ] ucptt.com