埋点开发流程

.net/.net core

flume

各业务方离线任务hive/spark/presto

python

fink实时etl

c/s

即时spark任务

在线测试

elk、kafka-日志中间层

hdfs离线文件

hive离线日志表

elk、kafka-原始日志

java

app

消息队列

业务实时任务

通用分析

客户端

后端服务

flume同步

实时教研

druid

小程序

日志接收/采集(logstash，filebate、日志接收服务等)

其他

http请求

web

异步请求