找软件用软件,到华军软件园!
您的位置:华军软件园>编程软件>源码下载>其他源码>

Pholcus(幽灵蛛)爬虫软件

Pholcus(幽灵蛛)爬虫软件

Pholcus(幽灵蛛)爬虫软件 PC版Pholcus(幽灵蛛)爬虫软件手机版

  • 版  本:PC版
  • 软件授权:免费软件
  • 软件类型:国产软件
  • 软件语言:简体中文
  • 更新时间:2017/12/22 15:31:05
  • 应用平台:WinAll
  • 软件官网:官方网站
  • 软件大小:6.7M
基本简介
Pholcus(幽灵蛛)爬虫软件

Pholcus(幽灵蛛)是一款纯Go语言编写的支持分布式的高并发、重量级爬虫软件,定位于互联网数据采集,为具备一定Go或JS编程基础的人提供一个只需关注规则定制的功能强大的爬虫工具。
它支持单机、服务端、客户端三种运行模式,拥有Web、GUI、命令行三种操作界面;规则简单灵活、批量任务并发、输出方式丰富(mysql/mongodb/csv/excel等)、有大量Demo共享;另外它还支持横纵向两种抓取模式,支持模拟登录和任务暂停、取消等一系列高级功能。
框架特点:
1、为具备一定Go或JS编程基础的用户提供只需关注规则定制、功能完备的重量级爬虫工具;
2、支持单机、服务端、客户端三种运行模式;
3、GUI(Windows)、Web、Cmd 三种操作界面,可通过参数控制打开方式;
4、支持状态控制,如暂停、恢复、停止等;
5、可控制采集量;
6、可控制并发协程数;
7、支持多采集任务并发执行;
8、支持代理IP列表,可控制更换频率;
9、支持采集过程随机停歇,模拟人工行为;
10、根据规则需求,提供自定义配置输入接口
11、有mysql、mongodb、csv、excel、原文件下载共五种输出方式;
12、支持分批输出,且每批数量可控;
13、支持静态Go和动态JS两种采集规则,支持横纵向两种抓取模式,且有大量Demo;
14、持久化成功记录,便于自动去重;
15、序列化失败请求,支持反序列化自动重载处理;
16、采用surfer高并发下载器,支持 GET/POST/HEAD 方法及 http/https 协议,同时支持固定UserAgent自动保存cookie与随机大量UserAgent禁用cookie两种模式,高度模拟浏览器行为,可实现模拟登录等功能;
17、服务器/客户端模式采用Teleport高并发SocketAPI框架,全双工长连接通信,内部数据传输格式为JSON。

相似软件
版本说明
软件地址
所属专题
血手幽灵

血手幽灵

华军软件园为小伙伴提供血手幽灵的相关软件下载专题。血手幽灵R8血魔骷髅无线游戏鼠标拥有专属的驱动软件——血手宝典3,丰富强大的功能使得鼠标在玩家手中得到淋漓尽致的发挥。作为鼠标行业的新秀,血手幽灵发布了数款高性价比鼠标,除此之外,血手幽灵还为其开发了血手令软件,玩家随时可使用血手令软件,来优化弹道与射速,更进一步有偿提供玩家面对游戏画面时,使用鼠...

软件截图
  • Pholcus(幽灵蛛)爬虫软件
Pholcus(幽灵蛛)爬虫软件下载地址
网友评论
网名:
(您的评论需要经过审核才能显示)
  • 置顶 华军网友 2017-06-16 13:56:44
    Pholcus(幽灵蛛)爬虫软件哪里不好了?不懂的别瞎哔哔,一点素质都没有
  • 置顶 华军网友 2016-07-01 22:15:06
    安装完的朋友能不能说一下Pholcus(幽灵蛛)爬虫软件能不能选择安装路径呢。
  • 置顶 华军网友 2016-06-21 21:46:02
    Pholcus(幽灵蛛)爬虫软件这么好的软件你到哪里去找啊
  • 置顶 华军网友 2015-10-20 09:52:29
    超级喜欢使用Pholcus(幽灵蛛)爬虫软件,这次下载Pholcus(幽灵蛛)爬虫软件PC版非常快速,还是最新版本,大力推荐
  • 置顶 华军网友 2015-09-22 22:20:30
    Pholcus(幽灵蛛)爬虫软件挺好用的一款其他源码软件,挺!!!就是下载好慢啊,赶脚那网速走的好无力
  • 10楼 华军网友 2015-07-25 11:26:34
    太谢谢你们了! 我差点下了!
  • 9楼 华军网友 2015-07-22 22:58:01
    没想到Pholcus(幽灵蛛)爬虫软件的安装包都已经这么大了,变化真快,看来又有很多新功能了
  • 8楼 华军网友 2015-07-07 15:32:38
    最近试试看这个Pholcus(幽灵蛛)爬虫软件,如果好用的话会向朋友推荐的。
  • 7楼 华军网友 2015-04-01 22:30:42
    这个软件好用吗
  • 6楼 华军网友 2015-02-26 10:58:58
    不知道安装程序在哪里?
其他源码推荐
精彩推荐
软件介绍
相关文章
所属专题
相关下载
软件截图
下载地址
网友点评
返回顶部