一站式云端通用爬虫开发平台
新手入门
  • 1、神箭手是什么?

    神箭手是一个一站式通用爬虫开发平台,帮助开发者快速构建功能强大的爬虫系统,并对爬取的数据进行一站式分析及导出。

  • 2、为什么选择神箭手?
    神箭手 开发框架(如 webmagic、webscapy) 采集器软件
    稳定性高
    爬取速度快
    24小时云端在线
    防屏蔽算法
    多种发布接口
    支持自动发布
    支持数据导出
    支持下载器导出
    支持编程
    无编程经验也可爬取
    支持JS自动渲染
    支持图片云托管
    支持验证码识别
功能介绍
  • 1、云端爬虫开发框架

    神箭手云爬虫开发平台是一个帮助JS开发者快速开发爬虫系统的SaaS服务平台。神箭手提供上手简单,灵活开放的云爬虫开发框架,让开发者只需要在线写几行js代码就可以实现一个爬虫,并且爬虫将自动运行在云服务器上,爬取速度更快,效率更高。

  • 2、神箭手云采集
    • 云端智能在线爬虫/采集器,可以帮助需要从网页获取信息的客户快速轻松地获取大量规范化数据;操作简单无需专业知识。
    • 任务在云端不间断运行,不用担心关机或者断网。
  • 3、神箭手云市场

    神箭手云市场现已有大量爬虫程序,几步简单操作即可爬取微信、企信、亚马逊、知乎、天涯、淘宝、天猫、豆瓣、百度贴吧、36kr、站长之家、百度百家、界面文章等海量网络数据,并可自动发布到各大主流CMS系统网站。

  • 4、扩展功能函数库

    海量代理IP、JS自动渲染、防屏蔽、图片云托管、验证码识别、关键字提取的等扩展服务,及不断添加的新功能。

  • 5、多渠道数据发布

    一键发布到网站、数据库、Excel等文件;同时支持邮件发送、微信微博等平台发布等。

  • 6、图表分析

    丰富的图表控件,帮您发掘数据的潜在价值。

如何开发爬虫
  • 创建
    步骤一:
    进入神箭手首页,在提示的登录面板中输入注册过的用户名和密码,点击登录即可进入控制台
    创建
  • 步骤二:
    在控制台点击添加爬虫>给爬虫命名>最后点击“创建”按钮,即创建成功
    创建
    创建
  • 编辑
    步骤三:
    在控制台点击“编辑”按钮,即进入爬虫总览页编辑代码页面
    创建
  • 步骤四:
    在编辑代码页修改代码,点击“保存”按钮,保存代码。再点击右下角黄色“测试”按钮,测试完成后右上侧将显示测试日志、下部分显示测试结果。
    测试
    创建
  • 启动爬虫
    步骤五
    测试完成后,打开爬虫“总览”页,点击右上角的“启动”爬虫按钮,即可在“爬取结果”页看到你开发爬虫的运行结果了
注:详细教程见 视频教程文档教程
如何采集数据
  • 创建
    步骤一:
    进入神箭手首页,在提示的登录面板中输入注册过的用户名和密码,点击登录即可进入控制台
    创建
  • 步骤二:
    返回爬虫市场,从爬虫市场找一个爬虫,点击“免费获取”按钮,进入控制台
    获取
    创建
  • 管理
    步骤三:
    在控制台点击“管理”按钮,即进入爬虫总览页
    创建
  • 步骤四:
    从后台“总览页”右上角,点击“启动”按钮,爬虫即开始运行了
    启动
    创建
  • 爬取结果
    步骤五
    在后台左侧导航栏,点击“爬虫结果”即可查看采集的数据
注:详细教程见 视频教程文档教程
如何发布数据
发布数据需要安装对应的发布插件 | 插件下载
  • 创建
    步骤一:
    进入神箭手首页,在提示的登录面板中输入注册过的用户名和密码,点击登录即可进入控制台
    创建
  • 步骤二:
    在爬虫总览页,点击左侧导航栏“发布到数据库/网站”,根据提示填写信息
    创建
    创建
  • 弹窗
    步骤三:
    保存成功后,在左侧导航栏中选择“爬取结果”页,选中一条爬取结果,显示发布弹窗
    创建
  • 步骤四:
    在该弹窗中,点击“发布数据”按钮,勾选需要的发布项
    发布项
    创建
  • 发布
    步骤五
    点击“发布”按钮,即发布完成
注:详细教程见 视频教程文档教程
如何自动发布数据
发布数据需要安装对应的发布插件 | 插件下载
  • 创建
    步骤一:
    进入神箭手首页,在提示的登录面板中输入注册过的用户名和密码,点击登录即可进入控制台
    创建
  • 步骤二:
    在爬虫总览页,点击左侧导航栏“发布到数据库/网站”,根据提示填写信息
    创建
    创建
  • 结果页面
    步骤三:
    保存成功后,在左侧导航栏中选择“爬取结果”页
    创建
  • 步骤四:
    点击爬取结果页右上角的“自动发布”按钮,爬取结果即会发布到您的网站或数据库中
    自动发布
注:详细教程见 视频教程文档教程
如何设置阿里云白名单
  • 创建
    步骤一:
    在阿里云管理控制台, 点击云数据库 RDS版进入该界面.
    创建
  • 步骤二:
    进入云数据库 RDS 版界面后, 点击基本信息中的示例列表进入详情页.
    创建
    创建
  • 结果页面
    步骤三:
    进入详情页后, 在基本信息界面的基本信息模块点击"设置白名单"按钮,进入白名单设置界面.
    创建
  • 步骤四:
    进入白名单设置界面后, 点击"添加白名单分组", 出现"添加白名单分组"弹出框.
    自动发布
    创建
  • 结果页面
    步骤五:
    在"添加白名单分组"弹出框中填写"分组名称"(任意名称)以及"组内名单"(神箭手服务器IP, IP 1: 101.200.135.7, IP 2: 123.56.247.76)
新手指南
客服中心
返回顶部