EA Repository
2016-11-23 10:23:20 0 举报
AI智能生成
思维导图是一种图形化的思维工具,用于帮助人们整理和表达复杂的思维过程。它以一个中心主题为核心,通过分支和节点的方式将相关的概念、观点和信息连接起来。每个节点可以包含文字、图像、颜色等元素,用于表示具体的思维内容。通过思维导图,人们可以清晰地展示思维的逻辑关系,发现新的思路和关联,提高问题解决的效率和创造力。思维导图广泛应用于教育、商业、科研等领域,成为人们思考和交流的重要工具。
作者其他创作
大纲/内容
ETL_JOB_GROUP
ETL_JOB_GROUP
ETL_JOB_GROUPCHILD
这是为了加载STG,ODS的作业,做的一个配置表STG_ODS_JOB_CONFIG
ETL_JOB
CTL
STG_ROBOT_START
STG_ROBOT_END
ODS_ROBOT_START
ODS_ROBOT_END
STG
表名即为job名字
JOB=$JOB CTLFILE=$CTLFILE TXDATE=$TXDATE
DELETE作业,ODS算法为upsert的,拉链表(大多数有)
数据加载作业
ODS
表名+[_H]即为job名字
JOB=$JOB TXDATE=$TXDATE
ETL_JOB_TIMEWINDOW
0,23
子主题
子主题
ETL_JOB_SOURCE
ETL_JOB_STEP
STG_ROBOT_START
$AUTO_HOME/bin/update_start_date.dsql
JOB=$JOB CTLFILE=$CTLFILE TXDATE=$TXDATE
STG_ROBOT_END
$AUTO_HOME/bin/update_start_date.dsql
JOB=$JOB CTLFILE=$CTLFILE TXDATE=$TXDATE
ODS_ROBOT_START
$AUTO_HOME/bin/ods_group_start.dsql
JOB=$JOB CTLFILE=$CTLFILE TXDATE=$TXDATE
ODS_ROBOT_END
$AUTO_HOME/bin/ods_group_end.dsql
JOB=$JOB CTLFILE=$CTLFILE TXDATE=$TXDATE
STG
$AUTO_HOME/bin/tpt_imp_all0100.dsql或者tpt_sql_operator.dsql
JOB=$JOB CTLFILE=$CTLFILE TXDATE=$TXDATE
DELETE作业,ODS算法为upsert的,拉链表(大多数有)
数据加载作业
ODS
ODS算法为'A'的时候,为$AUTO_HOME/etc/ODSCFG.txt $AUTO_HOME/bin/ods_append0200.dsql
ODS算法为'H'的时候,为$AUTO_HOME/etc/ODSCFG.txt $AUTO_HOME/bin/ods_history_chain0200.dsql
ODS算法为'D'的时候,为$AUTO_HOME/etc/ODSCFG.txt $AUTO_HOME/bin/ods_delete_insert0200.dsql
ODS算法为'U'的时候,为$AUTO_HOME/etc/ODSCFG.txt $AUTO_HOME/bin/ods_upsert0200.dsql
ETL_JOB_DEPENDENCY
STG Job、STG_DELETE_JOB对STG_GROUP_START作业的依赖
这里包括ods对delete作业的依赖,主要是拉链和upsert的作业对delete作业的依赖
ETL_JOB_STREAM
负责:STG与ODS之间的触发关系,也就是STG的job触发ODS的作业
这里不包括delete作业,因为delete作业不是触发ods作业的,而是ods的执行,主要是拉链和upsert的作业依赖的作业
0 条评论
下一页
为你推荐
查看更多