首页 流程图 详情

任务优化

2019-08-05 09:54:02 0 举报
仅支持查看
任务优化
数据仓库
作者其他创作
大纲/内容
设计新模型
上游文件大小不均匀，且小文件过多
Map长尾
Y
是否出现数据倾斜
是否上游个别表产出过晚
优化
Log View
是否超过1h
Count Distinct的处理
空值过多的处理
空值的处理
热点问题的处理
能否用t-1天前的数据
长尾部分
Reduce长尾
改变脚本起调时间
脚本并行
在不影响业务的情况下使用T-1天的数据
运行甘特图
某路输入过多的处理
N
该脚本能否和其他脚本并行
缩短代码运行时间
Join长尾
从产出早的表中获得指标
评论
0 条评论
下一页
为你推荐
查看更多
任务监控5
任务监控5
新学员任务
新学员任务
任务管理2
任务管理2
串行任务
串行任务
任务流程
任务流程
账户优化
账户优化
优化步骤
优化步骤
任务安排
任务安排
任务部分
任务部分
任务监控6
任务监控6