开放平台
场景
组成
数据采集
基于数据中台规划,线上、线下采集;
线下采集:动态配置模板,通过excel导入数据 ; [jdbc -> load]
线上采集:ETL调度、线上接口采集 --> xxl-job调度、新仓调度(T+1) [jsch工具]
数仓
采集库-> ODS -> DWD ->DWS ->DM -> ADS (Hive、MySQL)
维度层放与DWD层
元数据管理
DB连接信息维护;
库表、索引 维护...
核心组件:SpringBoot、JDBC、presto、Apollo
网关服务
权限校验、动态路由配置、限流、日志 ...
核心组件: SpringCloud GateWay、Redis、Sentinel、Apollo
开放服务管理
配置对外提供服务、使用情况 ...
开放服务
对外提供服务能力
其它服务平台
华为云、袋鼠云、数栖 ...