

首页  思维导图  详情



xpath采集系统

2017-08-11 11:58:11   5  举报





AI智能生成

使用python的PyQt4制作的一款获取web页面中选定区域xpath并展示的系统。

Python

PyQt4

模版推荐

作者其他创作

大纲/内容

后台功能

保存为CSV文件

无中文乱码

保存为JSON文件

无中文乱码

保存到sqlite数据库

urllist table

xpathlist table

需加载的js

highlight hover区域

将click区域xpath&value提交至WSGI服务器

WSGI服务器

接收form的http请求

将xpath&value追加到展示区

加载URL链接

http链接

https链接

SSL加密协议链接

https://42.99.33.26/MSS-PORTAL/resultannounc/listForAd.do?provinceJT=JT

带有swf文件的链接

http://credithb.gov.cn/publicity/notice/list.do?navId=3CD7A836597F4455E053540AA8C01302&columnId=3CD7A83659814455E053540AA8C01302

执行js加载操作

GUI界面

菜单

file

save as csv

xpath展示区数据保存至csv文件

save as json

xpath展示区数据保存至json文件

save to sqlite

xpath展示区数据保存至sqlite内置数据库

URL列表展示区数据保存至sqlite内置数据库

exit

退出系统

edit

delete

删除当前的URL链接

clear sqlite

完全清空数据库

about

about QT

QT关于信息

info

待添加关于信息

URL输入框

输入URL链接，并回车

检查链接是否已存在

URL列表展示区

展示已有与新增的URL链接

可选中一条右键删除

xpath数据展示区

展示当前URL链接选定区域的xpath&value

可选中一条右键删除

自定义web浏览器区

展示当前URL链接内容

加载js按钮

手动为当前URL链接执行js

 Collect

Get Started

采集系统

 Collect

Get Started

采集流程

 Collect

Get Started

PPT模板----数据采集

 Collect

Get Started

采集微服务





0 条评论

下一页