后羿采集器免费版

后羿采集器怎么样？国内知名的网络爬虫软件，使用完全免费，用户可以无限制进行数据的采集和结果的导出，操作流程简单，支持多种模式，兼容性强，是你必备的数据采集软件之一。有需要的朋友欢迎来体验！

后羿采集软件介绍

由前谷歌搜索技术团队基于人工智能技术研发的新一代网页采集软件。该软件功能强大，操作简单，是为广大无编程基础的产品、运营、销售、金融、新闻、电商和数据分析从业者，以及政府机关和学术研究等用户量身打造的一款产品。

后羿采集器教程

后羿采集器怎么用？很多新入手的朋友不知道如何使用，这里提供详细的教程。

一、如何下载、安装、注册、设置和升级软件

1、下载及安装

（1）下载

后羿采集器是业内首个支持windows、mac和linux全操作系统的采集软件。您可以在本站下载资源包，网站会根据你的操作系统推送相应的版本；

（2）安装

下载完成后请在文件保存路径找到安装包文件，双击进行安装。

2、后羿采集器的注册及设置

（1）打开后羿采集器，点击左上角进行新用户注册。

（2）您可以选择手机注册或者邮箱注册，后羿采集器为神箭手旗下产品，如果您已经注册过神箭手的账号，可以直接使用神箭手的账号进行登陆，无需再次注册。

※如果您未收到手机验证码，请按照以下步骤进行排查：

第一步：请您确认一下填写的手机号码是否正确。

第二步：如果号码填写正确，请您到拦截短信里查看一下，验证码短信有可能在被拦截短信里。

第三步：如果拦截圾短信里没有找到验证码，请您查看一下发送验证码的移动号码是否被拉入手机黑名单，您可以将该号码加入白名单，然后再在登陆界面点击“获取短信验证码”。

第四步：如果以上步骤未能解决您的问题，请直接联系官方客服，我们会在第一时间解决您的问题。

※如果您未收到账号激活邮件，请按照以下步骤进行排查：

第一步：请您确认一下填写的邮箱地址是否正确。

第二步：如果邮箱地址正确，请您查看一下垃圾箱，激活邮件有可能在垃圾箱里。

第三步：如果邮件不在垃圾箱中，请您查看一下是否设置邮件地址黑名单，激活邮件有可能被邮箱拦截，请您将后羿采集器加入白名单，然后再在登陆界面点击“发送邮件”。

第四步：如果以上步骤未能解决您的问题，请直接联系官方客服，我们会在第一时间解决您的问题。

（3）修改密码/注销账号

点击左上角头像可以打开基本资料窗口，您可以在此进行账户密码修改，或注销账号退出切换新账号登录。

（4）忘记密码

如果用户忘记密码的话，可以在登录界面进行修改。

（5）软件的基本设置

打开右上角齿轮状图标即可打开设置中心，您可以在此进行软件的基本设置。

3、如何升级软件版本

一般情况下，后羿采集器会自动识别新版本提示更新，如果没有提示的话，也可以在设置内检查更新，然后登录官网下载最新版本的安装包，下载完毕后直接双击打开即可进行完成软件更新。

二、什么是智能模式

智能模式是后羿采集器团队基于人工智能技术研发的新一代采集模式。该模式操作极其简单，只需要输入被采集的网址就能智能识别出网页中的内容，无需配置任何采集规则就能够完成数据的采集。

智能模式支持单个网址的采集和多个网址的批量采集，支持从本地txt文档中批量导入网址，并且支持批量生成网址。智能模式主要针对单页类型网页、列表类型网页和列表+详情页类型的网页，在批量采集多个网址时，建议只输入同一种类型的网页，例如全部都是列表类型或全部都是内容类型。不同类型的网页建议创建不同的任务进行采集。

三、如何导入和导出采集任务

1、导入采集任务

点击左上角图标导入本地任务，可直接运行任务，也可以按需修改任务。

2、导出采集任务

右击任务，选择导出任务到本地。

推荐理由

不仅能够进行数据的自动化采集，而且在采集过程中还可以对数据进行清洗。在数据源头即可实现数字、邮箱等多种内容的过滤。

通过使用后羿采集器，用户能够快速、准确地获取海量网页数据，从而彻底解决了人工收集数据所面临的各种难题，降低了获取信息的成本，提高了工作效率。

具有行业领先的技术优势，可以同时支持windows、mac和linux全操作系统的采集器。

功能说明

—采集任务：100个任务，支持多任务同时运行，无数量限制，支持云端存储，切换终端同步更新

—采集网址：无数量限制，支持手动输入，从文件导入，批量生成

—采集内容：无数量限制

—下载图片：无数量限制

—智能模式：智能识别列表和分页，一键采集

—流程图模式：可视化操作，可以模拟人为操作

—导出数据：导出数据到本地（无数量限制），导出格式：excel、txt、csv、html

—发布到数据库：无数量限制，支持发布到本地和云端服务器，支持类型：mysql、pgsql、sqlserver、mongodb

—筛选功能：根据条件组合对采集字段进行筛选

—预登录采集：采集需要登录才能查看内容的网址

—数据处理：字段合并，文本替换，提取数字、提取邮箱，去除字符、正则替换等

软件特色

全程自动化提取数据

后羿能智能识别要抽取的数据和分页，操作简单，一键提取。

可视化点选操作

全程可视化操作，点选修改要抽取的数据等。人人都会用的采集器。

多种采集模式，任何网站都能采

支持智能和高级采集，满足不同采集需求。支持xpath, json, http和post等。

软件箭速迭代

软件定期更新升级，不断添加新功能。客户的满意是对我们最大的肯定！

产品亮点

智能采集

智能分析并抽取列表/表格数据，并且能自动识别分页。 免配置一键采集各种网站，包括分页、滚动加载、登录采集、ajax等等。

跨平台支持

后羿采集器支持各种操作系统，包括windows, mac和linux。 不管是个人采集，还是团队/企业使用，都能满足您的各种需求。

多种数据导出

一键导出采集的所有数据。支持csv, excel和html等，同时也支持导出数据到数据库。

云端账号

采集任务自动保存到云端，不用担心任务丢失。一个账号多终端操作，可随时随地创建和修改采集任务等。

适用场景

品牌/价格监控

监控品牌信息和产品评价，追踪价格走势，竞品分析，seo监测优化，舆情监控等。

行业分析

采集国内外各大新闻源、博客、论坛、社交网络、电商平台等，助力行业分析和商业决策。

产品研发

自动获取格式化数据，适用于不同终端的产品内容同步。精准获取用户反馈和偏好，提高研发效率。

精准营销

快速发现潜在客户，全面收集客户需求。提升市场营销效率，增长销售业绩。

学术研究

一键获取海量数据，支持大数据分析研究、机器学习训练建模、人工智能学术研究等。

常见问题

1、xx 网站能不能采集？xx 内容能不能采集？

只要是有网址，可以通过网页浏览，您能看得见的内容，大多都是可以采集的（视频比较特殊，得分析具体情况）。

2、为什么采集数据提前停止了？

如果您遇到的采集提前停止的问题，请按照以下步骤自检一下：

第一步：请确认您在浏览器中能看见多少内容

有的时候搜索显示数量和你最终能看得见的数量不是一致的，请确认您能看见多少条数据，然后再确定采集是提前停止还是正常停止。

第二步：运行日志是否提示“网页数据未显示，等待加载时间不足或被反爬”

在采集过程中，如果遇到这个问题，有以下两种可能性：

第一种可能性是采集速度过快而网页加载时间过慢，从而导致无法采集到网页中的数据。

遇到这种情况时请增加请求等待时间，等待时间长一点之后，就有足够的时间留给网页加载内容。

请求等待时间的设置在 启动设置—>防屏蔽设置 中，如下图所示：

第二种可能性是你遇到了反爬，所谓反爬就是网站针对疑似采集的行为（不同网站对采集行为的定义不一致，例如有些网站觉得你翻页过快就不正常，有些网址觉得你翻页过多就不正常，有些网站觉得你直接输入了详情页的网址就不正常，等等）。

是否遇到了反爬我们可以通过在运行过程中，点击运行界面中的“查看网页”来观察一下当前的网页内容是否正常，是否无法正常显示，是否出现了验证码或者其他非正常内容的提示性文字。

如果出现了上述情况，那么你就是被反爬了。

解决反爬一般有降低采集速度、切换代理ip、手动打码或自动打码等方式，至于哪种方式可以起作用，这个需要测试才知道，不同的网站反爬手段不同，没有一个统一的解决方案。

如果是遇到了反爬，你可以在问答社区反馈给我们，我们会为您提供支持。

3、为什么采集字段不全？

字段不全一般有以下两种情况：

第一种，由于列表元素的结构不同，有些元素中有的字段其他元素中没有，这是正常的现象，请大家先在网页中确认对应元素中是否存在你想要的字段。

第二种，页面结构发生了变化，这种通常会发生在同一个搜索结果中包含多种页面结构的场景，例如百度搜索结果（包含很多种网站），淘宝搜索结果（包含淘宝和天猫）等。

这种情况需要针对具体问题进行分析，您可以导出您的采集任务，发到我们官方的问答社区，我们的工程师会帮您进行测试分析。

4、采集停止了，再运行是不是从头开始？

是的，采集停止之后，下次再直接启动会默认按照上一次的设置从头开始采集。

5、编辑任务时出现滑块怎么办？

目前后羿采集器已经支持在运行过程中自动检测滑动验证码和手动打码。如果大家在编辑任务时已经出现了滑块验证码，请在第一个界面点击预登录，然后在预登录里点击列表中的标题，打开详情页，让滑块验证码跳出来，然后在预登录窗口里把滑块问题解决掉。然后点击登录成功关闭预登录窗口，这样在编辑任务时就不会出现滑块了。

更新日志

v3.6.1

修复

修复某些情况下的文件下载问题

修复某些情况下的代理问题

v3.6.0

增加

支持POST方式的文件下载

优化

提高sku的兼容性

v3.5.4

优化

优化文件下载的各种兼容问题

增加

导出csv时支持tab分隔符

新增退出软件的api接口

修复

修复按组运行的问题

修复处理的链接无法深入采集的bug

v3.2.2

修复

修复部分网页打不开的问题

修复滚动的bug

优化

兼容下一页弹出新窗口

调整提示窗显示