K Data extraction principle

crontab定时任务

使用

写入日志

执行存储过程的脚本

/etl/job目录的各种ktr文件

/etl/job/script/sh/runetl.sh

/etl/engine/pan.sh

定时执行脚本

抽取数据的脚本

1，engine为kettle程序目录。2，job为kettle项目目录，里面包含抽取数据的各种配置，包括抽取规则，连接配置等。3，timing开头的为表数据抽取任务，可单独抽取ZZ1，RZ1等，例如：sh /etl/job/script/sh/runetl.sh 1 GZ1 &call开头的文件为执行存储过程的任务，例如：#!/bin/bashexport PATH=$PATH:/usr/java/bin/etl/engine/pan.sh -norep -file=/etl/job/CALL_11.ktrCALL_11.ktr里面就是你执行的存储过程。 

etl目录

1，crontab -l 查看所有定时任务，每行为单独一个任务。2，crontab -e 修改crontab任务表，可以根据实际情况调整。3，时间定义具体百度crontab表达式

/etl/job/script/logs/