ETL任务
2016-09-09 15:39:33 0 举报
ETL任务是数据仓库中非常重要的一环,它包括了从各种来源提取数据、对数据进行清洗和转换、以及将数据加载到目标系统中的过程。在ETL过程中,数据源可以是各种不同的格式,如关系型数据库、文本文件、XML文件等。为了确保数据的质量和一致性,ETL工具需要对数据进行严格的验证和清洗,以确保数据的准确性和完整性。此外,ETL过程还需要考虑到数据的安全性和隐私性问题,采取相应的措施来保护数据的安全。总之,ETL任务是一个复杂而重要的过程,它需要专业的技能和经验来完成。
作者其他创作
大纲/内容
sytemA.module1.xxx1.A-12.201812281430
广告投放
留存
HBase指标数据存储
美杜莎埋点
用户推荐
订单交易量_全部商家_线下销售_20180401 : 指标值+1
加购
订单交易量_A商家_全部业态_20180401 : 指标值+1
指标名称_业务维度_时间维度: 计算函数
浏览
{用户ID:\"102\
订单交易量_全部商家_全部业态_20180401 : 指标值+1
+
数据
外部短链落地打标
其他...
通过标识拉取指标模型
指标模型
埋点追踪
交易单量下单人数GMV
分钟小时天
指标数据源
渠道推广
batman.market.coupon-a.82-12.201812281430
支付
一码到底
CountSumMaxMinCount distinct
登录
注册
下单
数据访问
业态维度商家维度支付维度
Flink实时计算引擎指标计算count|sum|max|countcount distinct指标计算模型
数据标识
激活
Kafka分布式消息队列
海盗指标
盈利
内部渠道SDK打标
指标管理指标模型
DMM:
渠道追踪
订单总交易量_商家*业态维度_天统计:累加(Count)
获取
数据清洗逻辑处理
渠道管理平台服务 Api/Dubbo
安装激活
启动
medusa.push.coupon-b.2822-2.201812281430
Cookie
medusa.push.coupon-a.1122-1.201812281400
DB/元信息
美杜莎
订单交易量_A商家_线下销售_20180401 : 指标值+1
0 条评论
下一页