大小:35.90M更新:2019-04-02 13:07
类别:网页辅助系统:Win7, WinAll
包名:
神箭手软件免费版是一款由杭州快忆科技有限公司推出的爬虫软件,功能强大,基于该公司的平台能够快速准确地可视化选取的网页数据,用户可以统一导出数据,操作更加简单方便,有需要的朋友欢迎来体验!
大数据和人工智能的云操作系统,您可以在神箭手上快速开发大数据和ai应用,包括爬虫/机器学习/数据清洗/api接口等。神箭手封装了复杂的算法和分布式逻辑,提供简单灵活的开发接口;应用自动分布式部署和运行,可视化简单操作,弹性扩展计算和存储资源;统一可视化管理不同来源的数据,restful接口/webhook推送/graphql访问等高级功能让您无缝对接现有系统!
快速开发,降低开发成本;
提供标准的弹性云服务;
无缝对接您的现有系统;
数据实时精准/分布式处理。
1、如何爬取数据
步骤一 登录
打开神箭手官网 或者 客户端软件, 输入”账户”和”密码”,点击”登录”进入控制台。
步骤二 创建爬虫
您可以:
从神箭云市场获取需要的爬虫,直接使用:
注意: 免费爬虫注册用户可以免费使用;套餐限制为【个人专业版】及以上或有价格爬虫,可以先试用爬取10条数据,然后再根据提示 升级指定套餐 或 购买使用天数 继续使用。
创建一个新爬虫,在线开发:
步骤三 设置爬虫
打开爬虫,在爬虫设置页面,可以通过【功能设置】设置 文件云托管 和 代理ip种类 等;通过【自定义设置】设置具体要爬取的方式和范围等。
注意: 如果您更改了设置,请保存后重启爬虫(停止后重启 或者 暂停后继续)才会生效。
步骤四 启动爬虫
在爬虫总览页面,点击【启动爬虫】按钮,启动爬虫运行。启动前,可以设置 启动方式和定时运行等。
注意:爬虫的速度和使用的节点有关。节点数越多,爬取速度越快;
爬取结果里的数据会自动去重,以确保爬取的数据不出现重复。具体去重方式点此查看。
步骤五 预览和导出数据
在爬虫爬取结果页,您可以将爬取的数据导出到本地文件、发布到数据库/网站/邮箱/媒体等;也可以设置webhook,神箭手会将爬取的数据post到您的服务器;还可以通过graphql接口查询数据。
步骤六 更新爬虫
从市场获取的爬虫,如果爬取失效或者其他原因导致的爬虫代码修改和升级,您都可以登录神箭手后进行更新。如果爬虫正在运行中,需要重启(停止后再启动 或者 暂停后继续)下新代码才会生效。
2、如何使用api接口
步骤一 登录
打开神箭手官网 或者 客户端软件, 输入”账户”和”密码”,点击”登录”进入控制台。
步骤二 创建api接口
您可以:从神箭云市场获取需要的api接口,直接使用:
注意: 免费的api接口您可以免费无限次调用;收费的api接口您可以在赠送的调用次数用完后,购买调用次数继续使用。
创建一个新api接口,在线开发:
步骤三 设置api接口
打开api接口,在api设置页面,可以设置 调用白名单、代理ip种类和文件云托管等。
注意: 如果您更改了设置,请先保存设置后再调用才会生效。
步骤四 测试api接口
在测试工具页面,输入【请求参数】,点击【开始测试】按钮。检测调用api接口返回的数据。
步骤五 调用api接口
在调用代码页,参考不同语言的调用代码示例,您可以通过程序调用api接口获取数据。
步骤六 更新api接口
从市场获取的api接口,如果调用失效或者其他原因导致的api代码修改和升级,您都可以登录神箭手后进行更新。更新后重新调用新代码才生效。
3、如何使用数据源
步骤一 登录
打开神箭手官网 或者 客户端软件, 输入”账户”和”密码”,点击”登录”进入控制台。
步骤二 获取数据源
您可以:
打开神箭云市场,选择需要的数据源和规格,点击”获取数据”按钮,自动创建并打开数据源;
注意: 免费的数据源您可以免费获取所有数据;收费的数据源您可以免费预览10条试用,购买后可获取完整数据。
在后台的数据源管理中,创建一个新的数据源,上传本地文件或者连接远程数据库;也可以管理爬虫或者清洗等应用自动创建的数据源。
步骤三 预览数据
在数据源的数据页面,您可以【查看所有数据】,也可以点击某条数据【预览】。
步骤四 请求/发布/导出数据
在请求数据页面,可以通过调用graphql接口直接查询数据源中的数据。
在发布数据页面,可以把数据发布到数据库/网站/邮箱/微信公众号等。
在导出数据页面,可以将数据导出到本地文件。
步骤五 更新数据
从市场获取的数据源,会不定期进行更新。已有数据的更新是免费的,新增数据您可以登录神箭手后查看详情,支付后即可获取新增数据。
4、如何发布数据
步骤一 登录
打开神箭手官网 或者 客户端软件, 输入”账户”和”密码”,点击”登录”进入控制台。
步骤二 安装发布插件
如果要发布数据到cms网站,需要先在您的cms网站上安装对应的发布插件。
步骤三 创建发布项
在发布数据页面,新建发布项,设置发布数据的地址、数据字段对应等。点此查看详细教程.
步骤四 手动发布数据
在数据页面,点击一条或者选择多条数据,选择要使用的发布项(可以选择多个发布项),手动发布数据。
步骤五 自动发布数据
在发布数据页面,点击【自动发布】按钮,所有数据会进行自动发布。
q: 如何复制应用
登录神箭手后,点击应用列表的复制应用。api接口应用不能复制
q: 节点是什么
节点是运行神箭手应用的最小计算单元;比如每个爬虫或者清洗应用的运行,都需要占用至少一个节点(定时休息的应用也需要占用节点);运行一个应用的节点越多,速度越快;一个应用运行完成,其占用的节点也会被自动释放,可以用来运行其他应用。神箭手的节点包括普通节点和gpu节点,gpu节点主要适用于机器学习等需要极速运算的应用。
q: 如何开具发票
消费满300元即可免费开具发票,发票类目统一为 “软件服务费”。请在登录神箭手后的发票管理中申请,每周五统一处理和邮寄(金额达到1万元可免邮,否则统一是顺丰到付)
q: 如何签订服务合同
神箭手提供电子合同。购买服务后,可以在登录神箭手后的合同管理中下载。下载后可以点击自动生成带电子章的正式合同
q: 爬虫爬取的图片不能正常显示
这种一般是因为目标网站有图片防盗链,可以在爬虫设置里开启自动托管图片,将图片下载到云存储上。神箭手托管文件后会自动更新数据里的图片链接,这样图片就能正常显示了。点击此处了解如何开启托管和费用说明
q: 如何批量下载爬取的文件链接
可以在爬虫设置里开启自动托管文件,爬虫启动后会自动识别文件下载链接并下载到云存储上。点击此处了解如何使用和费用说明
q: 怎么查看爬取到数据的时间和网页链接
打开爬虫的 “爬取结果”,可以看到爬取时间和链接默认是不显示的。点击右上角的自定义列表项,在弹窗中勾选爬取时间和链接,这样就能在爬取结果中显示出来了
快忆科技(kuaiyi tech)成立于2015年,是专注于大数据和人工智能服务的高科技互联网公司,旨在为全球的企业和开发者提供前沿的大数据和人工智能应用开发和服务生态。 基于来自google的技术团队自主研发的分布式大数据操作系统:kd-os,提供从大数据采集获取、可视化存储管理、数据清洗、bi商务智能到ai机器学习算法的数据训练、建模、模型管理、 模型服务(serve)等一站式产品和服务。
显示全部
搜狗高速浏览器下载安装 网页辅助82.38MBV11.0.1.34700_4579
下载SuperCopy超级复制 网页辅助192KBv0.0.4
下载Burp Suite Professional最新版 网页辅助14.32Mv2.0.11 中文版
下载httpwatch pro(网页分析工具) 网页辅助25.29Mv11.1.20.0 特别版
下载八爪鱼数据采集器修改版 网页辅助56.59Mv7.6.0 最新免费版
下载hosts编辑工具(Easy Hosts File Editor) 网页辅助15.27Mv3.5 官方版
下载listen1电脑版 网页辅助79.92Mv2.21.7 最新版
下载火车采集器最新版 网页辅助34.31Mv10.1 pc版
下载后羿采集器免费版 网页辅助47.54Mv3.6.2 最新正式版
下载大作mac版 网页辅助14.88Mv3.0 官方版
下载listen1苹果pc端 网页辅助82.44Mv2.21.7 mac桌面版
下载大作电脑客户端 网页辅助15.78Mv3.5 pc端
下载后羿采集器mac官方版 网页辅助75.45Mv3.6.1 官方版
下载后羿采集器linux最新版 网页辅助77.63Mv3.6.1 官方版
下载猫抓最新版 网页辅助76KBv1.0.16 官方版
下载吾道幻灯片最新版(woodo幻灯片) 网页辅助942KBv2.8.0 pc最新版
下载捕鱼达人3单机最新版 趣味休闲47.81MB
下载海南麻将乐天游戏 趣味休闲49.47MB
下载笛声缘斗地主 趣味休闲49.45MB
下载捕鱼乐缤纷官方网站 趣味休闲49.47MB
下载天天街机捕鱼千炮手游 趣味休闲56.12MBv5.2.0 安卓版
下载手机单机版斗地主 趣味休闲49.45MB
下载姚记捕鱼小米登录版 趣味休闲56.12MBv1.0.4.1.0 安卓版
下载人人捕鱼3D游戏 趣味休闲56.12MBv2.00 安卓官方最新版
下载捕鱼在线玩 趣味休闲53.94MB
下载捕鱼大师千炮版游戏 趣味休闲56.12MBv4.0.0.0 安卓版
下载真精华布衣 生活服务33.25MB
下载2020香港正版挂牌资料 生活服务19.08MB
下载预测加拿大2.8软件 生活服务19.08MB
下载天天彩选4综合走势 生活服务33.25MB
下载彩吧助手旧版 生活服务19.08MB
下载