找软件用软件,到华军软件园!
您的位置:华军软件园>编程软件>源码下载>其他源码>

Pholcus(幽灵蛛)爬虫软件

Pholcus(幽灵蛛)爬虫软件

Pholcus(幽灵蛛)爬虫软件 PC版Pholcus(幽灵蛛)爬虫软件手机版

  • 版  本:PC版
  • 软件授权:免费软件
  • 软件类型:国产软件
  • 软件语言:简体中文
  • 更新时间:2017/12/22 15:31:05
  • 应用平台:WinAll
  • 软件官网: www.188soft.com
  • 软件大小:6.7M
基本简介
Pholcus(幽灵蛛)爬虫软件

Pholcus(幽灵蛛)是一款纯Go语言编写的支持分布式的高并发、重量级爬虫软件,定位于互联网数据采集,为具备一定Go或JS编程基础的人提供一个只需关注规则定制的功能强大的爬虫工具。
它支持单机、服务端、客户端三种运行模式,拥有Web、GUI、命令行三种操作界面;规则简单灵活、批量任务并发、输出方式丰富(mysql/mongodb/csv/excel等)、有大量Demo共享;另外它还支持横纵向两种抓取模式,支持模拟登录和任务暂停、取消等一系列高级功能。
框架特点:
1、为具备一定Go或JS编程基础的用户提供只需关注规则定制、功能完备的重量级爬虫工具;
2、支持单机、服务端、客户端三种运行模式;
3、GUI(Windows)、Web、Cmd 三种操作界面,可通过参数控制打开方式;
4、支持状态控制,如暂停、恢复、停止等;
5、可控制采集量;
6、可控制并发协程数;
7、支持多采集任务并发执行;
8、支持代理IP列表,可控制更换频率;
9、支持采集过程随机停歇,模拟人工行为;
10、根据规则需求,提供自定义配置输入接口
11、有mysql、mongodb、csv、excel、原文件下载共五种输出方式;
12、支持分批输出,且每批数量可控;
13、支持静态Go和动态JS两种采集规则,支持横纵向两种抓取模式,且有大量Demo;
14、持久化成功记录,便于自动去重;
15、序列化失败请求,支持反序列化自动重载处理;
16、采用surfer高并发下载器,支持 GET/POST/HEAD 方法及 http/https 协议,同时支持固定UserAgent自动保存cookie与随机大量UserAgent禁用cookie两种模式,高度模拟浏览器行为,可实现模拟登录等功能;
17、服务器/客户端模式采用Teleport高并发SocketAPI框架,全双工长连接通信,内部数据传输格式为JSON。

相似软件
版本说明
软件地址
所属专题
360壁纸官方下载

360壁纸官方下载

 360壁纸官方版是360全新推出的壁纸类客户端,海量高清壁纸任你挑,每日壁纸自动更换,高清海量美图播不停,让您的桌面从此不再单调。360壁纸官方版拥有高清美图自动换一键开启自动换壁纸功能,您无需指定图片,只需要指定您喜欢的图片分类,并且在指定的时间间隔内,自动为您更换壁纸,让您的桌面天天都有新的气息!华军软件园为大家提供 360壁纸官方下载专题以供大家下载,不...

软件截图
  • Pholcus(幽灵蛛)爬虫软件
Pholcus(幽灵蛛)爬虫软件下载地址
网友评论
网名:
(您的评论需要经过审核才能显示)
  • 置顶 华军网友 2017-04-15 22:36:29
    好极了,这个Pholcus(幽灵蛛)爬虫软件是我用过最好的其他源码了
  • 置顶 华军网友 2017-03-16 13:20:10
    跟其它其他源码相比,我个人认为这个Pholcus(幽灵蛛)爬虫软件还算是这里做的比较不错的软件了。
  • 置顶 华军网友 2017-02-27 08:40:27
    非常不错,Pholcus(幽灵蛛)爬虫软件良心,已经很难找到这么好的其他源码软件了
  • 置顶 华军网友 2016-12-16 14:13:39
    楼主你太好了.........
  • 置顶 华军网友 2016-11-18 20:19:16
    心累,总算是更新到PC版了,之前遇到的问题希望已经解决了。。
  • 10楼 华军网友 2016-11-15 11:48:39
    找了好多网站,还是华军软件上下载的Pholcus(幽灵蛛)爬虫软件靠谱,页面清爽,可以隐藏推送,不会妨碍正常办公
  • 9楼 华军网友 2016-07-11 12:55:38
    Pholcus(幽灵蛛)爬虫软件就是好用!呵呵,我喜欢这个其他源码
  • 8楼 华军网友 2016-06-19 20:03:37
    Pholcus(幽灵蛛)爬虫软件很不错,但是为啥360有时候会误报,好无语,信任就可以了
  • 7楼 华军网友 2016-02-07 19:26:42
    免费又没广告,你去开发吧,人家吃屎啊,
  • 6楼 华军网友 2015-04-05 20:42:49
    里面设置下就行了别计较,人要心胸宽广嘛
其他源码推荐
精彩推荐
软件介绍
相关文章
所属专题
相关下载
软件截图
下载地址
网友点评
返回顶部
前往
下载