BigData-trans
2014-06-13 17:17:31 6 举报登录查看完整内容
数据采集处理
作者其他创作
大纲/内容
凌晨3点
凌晨2点
监控中心服务器
凌晨1点
email数据挖掘
eml转换程序转换为bigtable
读取mysql表M表取出path字段，转换成.eml格式的文件
End
上传附件、bigtable文件
上传附件
eml转换程序
hdfs
Mysql读取表程序
存放到一个目录，等待同步
rsync进行同步
开始
OA服务器
进行eml文件转换为bigtable处理
hdfs系统
上传bigtable
中转服务器
eml文件
收藏
0 条评论
回复 删除
下一页
