grab理解
2015-11-17 18:09:40 0 举报
test
作者其他创作
大纲/内容
worker引擎入口文件
在dao之上最数据库还有memcache做相关增删查改
可以理解为和icw的中间件
基本囊括我们整个grab的配置信息
所有workers开头的文件夹,测试以及线上worker name的分类
对数据库相关增删查改
第三方html解析插件
可以理解为client发起者,囊括很多抓取工作
各个网站的节点功能实现,以及公用函数
业务逻辑,会调用到libraries的相关节点功能
收藏
收藏
0 条评论
下一页