应用简介
八爪鱼采集器是一个技术领先的网页采集软件,这款软件使用先进的分布式云计算平台,为用户在很短的时间内,轻松从不同网站、页面获取大量内容,使用简单,方便快捷。八爪鱼采集器采用自主研发的分布式云计算,以最快的方法,从任何网页提取数据,帮助用户实现数据自动采集,自动修改、规范化,减轻操作人员的工作压力,减少人工,节省成本。

【功能介绍】
1、金融数据,如季报,年报,财务报告, 包括每日最新净值自动采集;
2、各大新闻门户网站实时监控,自动更新及上传最新发布的新闻;
3、监控竞争对手最新信息,包括商品价格及库存;
4、监控各大社交网站,博客,自动抓取企业产品的相关评论;
5、收集最新最全的职场招聘信息;
6、监控各大地产相关网站,采集新房二手房最新行情;
7、采集各大汽车网站具体的新车二手车信息;
8、发现和收集潜在客户信息;
9、采集行业网站的产品目录及产品信息;
10、在各大电商平台之间同步商品信息,做到在一个平台发布,其他平台自动更新。
【怎么采集呢】
当我们初次接触采集器,想要快速采集到数据推荐使用内置模板采集,内置模板500+个,大多数网站我们都是有相应的模板的,大家可以再搜索框内搜索相关的网站关键词进行查询是否有模板
如果没有您想要的网站,可以尝试用我们的自动化智能识别采集,详见智能识别采集,智能识别采集能自动识别网页内容,自动建立采集规则,建立好采集规则一键采集就好啦。

当然了如果自动识别也满足不了您的需求,我们也提供自定义采集,自定义采集就比较复杂,但是也更加灵活,您可以根据自己的需要个性化配置所需规则。

【八爪鱼采集器怎么搭建自定义采集】
1.输入网址
在主页的搜索框内输入我们要采集的网址

进入到采集页面后,我们观察到客户端右边有一栏规则,规则内只有一个打开网页,底部是数据预览区域,目前没有配置规则,所以为空。

2.选中要采集的元素 提取数据
选中图书的标题,观察到网页内选中标题绿色高亮,底下相似的标题显示红色虚线,同时操作提示也发生了变化,出现了【提取数据】和【鼠标操作】两类以及【选中全部相似元素】

我们选择【选中全部相似元素】,可以看到所有红色虚线的都变为绿色,并且底部也出现绿色数据的预选框,这时我们就选中了全部相似元素(所有图书的标题元素信息)同时观察到,我们的提示框也发生了变化,【鼠标操作】栏目内少了几项,这是因为我们采集器自动预判接下来的动作进行操作提示

我们此时已经选中所有要采集的数据元素,但是我们还没有明确要采集元素内的什么信息,因为网页上的某个元素块可能包含文本信息,链接信息,以及网页源代码信息,我们采集图书标题的文本信息,选择【文本内容】
可以看到页面又发生了变化,原本的网页内的选中框已经消失,底部的绿色预选框也变为白色,这意味着我们已经选择好了要采集的数据,并且已经在右边生成了相对应的规则,同时操作提示又发生了变化,提示我们是否要翻页等等,这里我们不需要翻页,修改字段名称点击采集即可

3.修改字段名称
选中提取列表数据,双击修改字段名,修改为图书名

4.启动采集
修改完成后,点击采集

4.导出数据
将采集到的全部数据,导出到本地或者数据库

选择导出的格式

打开采集到的数据

【常见问题】
软件能采集匿名账户信息吗?
如果你没有权限查看匿名的数据就不可以,八爪鱼可以代替人工更加自动和智能的收集数据,但不会协助你收集你没有权限浏览的数据,比如别人的密码等隐私数据。
软件能采集别人的后台数据吗?
不能采集,后台数据需要有后台访问权限,正规的采集软件不会提供此类侵权服务。但您可以采集自己的后台数据。
能采集QQ号码、邮箱、电话号码之类的吗?
能采集,任何你在网页上能看见的数据都可以采集,软件内置的规则市场中也有很多此类规则可下载,无需配置,运行规则就可以提取到这些数据。
【更新内容】
主要体验改进
【云采集】新增云采集实况功能,展现任务的云端运行情况,如任务的拆分,分配节点,采集数据等过程
【云采集】新增云采集通知功能,可针对每个任务设置采集完成 、采集停止时进行邮件通知程
【云采集】新增单个子任务重启功能,对采集量较少或状态是已停止的子任务进行重启,可减少数据遗漏
Bug修复
修复「重试次数设置不生效」问题
修复「循环URL异常」问题
修复「最后一个字段,修改字段名保存无效」问题
提升性能,修复若干卡顿问题