AI
推荐
模板社区
专题
登录
免费注册
首页
流程图
详情
scrapy
2015-10-21 10:43:45
0
举报
分享方式
仅支持查看
good
map
作者其他创作
大纲/内容
N
Y
抽取信息 （info、URL、image等）
进入数据库
开始
抽取网页子地址
return item
触发stop signal
构造初始url
configure 中nowid+1
结束
保存服装信息至info_status_db(status=0)、关闭数据库
检查信息是否合法？
判断此id服装信息是否已在数据库中？
firstid=id=endid?
drop item
读取configure.txt中当前页面nowid
抓取网页数据
收藏
立即使用
scrapy
金牛小蜡烛
职业：暂无
去主页
评论
0
条评论
下一页
为你推荐
查看更多
scrapy的流程
Scrapy爬虫框架
Scrapy Spider Request and Response
Scrapy 框架流程图
scrapy-engine_process_堆栈
scrapy爬虫流程
Python_Scrapy爬虫
scrapy
scrapy的流程
scrapy五大核心组件
