跳至主要內容

ETL设计

HeChuangJun约 109 字小于 1 分钟

数据提取

使用策略模式采集不同的数据,接口、视图等
接口采用异步投放到消息队列削峰
视图采用定时任务按照时间间隔来抓取数据

数据转换

按照业务逻辑将数据转换成保存接口的数据

数据保存

提供保存和更新接口