spider
2016-08-22 15:33:49 0 举报
蜘蛛是一种节肢动物,属于蛛形纲。它们通常有八条腿,身体分为头胸部和腹部两部分。蜘蛛的口器包括螯肢和毒腺,可以用来捕捉猎物并注入毒液。它们的视力非常好,能够看到远处的猎物。 蜘蛛是肉食性动物,以昆虫、小型脊椎动物和其他无脊椎动物为食。它们会用粘性的蛛丝制造陷阱,等待猎物上钩。一旦猎物被捕获,蜘蛛就会用螯肢将其固定住,然后用毒液将其杀死。 除了作为自然界中重要的捕食者外,蜘蛛还有许多其他用途。例如,一些蜘蛛可以制造丝绸,用于制作纺织品。此外,蜘蛛还可以用于医学研究,因为它们的毒液中含有许多有用的化合物。
作者其他创作
大纲/内容
参数解析
no
ip固定队列
创建爬虫
爬虫结束
yes
pop(IP)
队列为空
获取爬虫进度
启动爬虫
update进度
手动触发
push(IP)
总控调度
持久化
结束爬虫
get
push
计算负载
获取抓取机器列表
更新实例状态
机器关闭
Job
爬虫启动
获取请求
抓取集群
扫描
Redis
机器启动
下载
可运行抓取机器队列
请求解析
定时触发
实例请求队列
push(request)
Mysql
创建爬虫引擎
监听当前ip队列
实例运行统计数据
调度集群
爬虫运行实例
pop(request)
保存配置化信息
async
定时
抽取
爬虫运行实例队列
请求封装
分发任务
DTS
更新运行时实例
0 条评论
下一页
为你推荐
查看更多