网友评分:
9.7分
飞腾反黄软件 V2.3.0.1010 官方版
全能模拟王自动点击软件 V17.1.1 绿色最新版
Sangfor WebShellKiller(网站暗链检测工具) V3.3.0.2 绿色免费版
Easy Web Editor(可视化网页制作软件) V2016.40.1 官方版
Google Web Designer(网页编辑器) V8.0.3.0603 官方版
Advanced PDF Page Extractor(PDF页面提取软件) V1.5 官方版
Fiddler4网页抓包软件 V5.0.2 官方版
我要看vip视频Chrome插件 V1.4.1 绿色版
爬山虎采集器是一款新一代智能化的网页采集工具,智能分析、可视化界面,一键采集无需编程,支持自动生成采集脚本,可以采集互联网99%的网站。软件简单易学,通过智能算法+可视化界面,随心所欲,抓取自己想到的数据。只要轻松点击鼠标,就能采集网页上的数据。
一键提取数据
简单易学,通过可视化界面,鼠标点击即可抓取数据
快速高效
内置一套高速浏览器内核,加上HTTP引擎模式,实现快速采集数据
适用各种网站
能够采集互联网99%的网站,包括单页应用Ajax加载等等动态类型网站
向导模式
简单易用,轻松通过鼠标点击自动生成
脚本定时运行
可按照计划定时运行,无需人工
独创高速内核
自研的浏览器内核,速度飞快,远超对手
智能识别
对于网页中的列表、表单结构(多选框下拉列表等)能够智能识别
广告屏蔽
定制的广告屏蔽模块,兼容AdblockPlus语法,可添加自定义规则
多种数据导出
支持Txt 、Excel、MySQL、SQLServer、SQlite、Access、网站等
输入采集网址
打开软件,新建任务,输入需要采集的网站地址。
智能分析,全程自动化提取数据
进入到第二步后,爬山虎采集器全自动智能分析网页,并且从中提取出列表数据。
导出数据到表格、数据库、网站等
运行任务,将采集到的数据导出为Csv、Excel以及各种数据库,支持api导出。
问:如何过滤列表中的前N个数据?
1、有时我们需要对采集到的列表进行过滤,比如过滤掉第一组数据(在采集表格时,过滤掉表格列名)
2、点击列表模式菜单中的,设置列表xpath
问:如何抓包获取Cookie,并且手动设置?
1、首先,使用谷歌浏览器打开要采集的网站,并且登陆。
2、然后按下 F12,会出现开发者工具,选择 Network
3、然后按下F5,刷新下页面, 选择其中一个请求。
4、复制完成后,在爬山虎采集器中,编辑任务,进入第三步,指定HTTP Header。
优化网页表格数据的识别,可按照表格列名自动命名字段
优化时间提取
修复当有自定义字段,没有匹配到不保存数据的问题
添加时间戳变量
计划任务,每间隔分钟增加开始秒
标签: 网页采集