数据系统整体架构

营销主题

OLAP（ClickHouse）

商家主题

数据计算

数据存储

实时/流式计算（Oceanus）

交互式查询（ClickHouse）

数据主题

TDBank 增量实时接入（Tube)

商品主题

自助查询(Hive/Spark、Presto)

日志检索（ES）

数据质量管理

用户主题

....

统一元数据管理

数据源层

服务端日志

数据接入

离线计算（Hive、Spark）

线上服务(ES、Redis)

风控主题

数据应用

前端日志

报表门户（MySql）

外部数据

数据存储（HDFS、ClickHouse、Iceberg、ES、Redis、MySQL）

内存计算（Presto）

业务数据库

数据服务（报表、接口、查询）

US统一调度

数据服务