henrylee2cn/

app interface for graphical user interface.

surfer是一款Go语言编写的高并发web下载器，支持 GET/POST/HEAD 方法及 http/https 协议，同时支持固定UserAgent自动保存cookie与随机大量UserAgent禁用cookie两种模式，高度模拟浏览器行为，可实现模拟登录等功能。

Package agent generates user agents strings for well known browsers and for custom browsers.

数据收集

结果收集与输出

[spider frame (golang)] Pholcus（幽灵蛛）是一款纯Go语言编写的高并发、分布式、重量级爬虫软件，支持单机、服务端、客户端三种运行模式，拥有Web、GUI、命令行三种操作界面；规则简单灵活、批量任务并发、输出方式丰富（mysql/mongodb/csv/excel等）、有大量Demo共享；同时她还支持横纵向两种抓取模式，支持模拟登录和任务暂停、取消等一系列高级功能； （官方QQ群：Go大数据 42731170，欢迎加入我们的讨论）。

Package config is used to parse config Usage: import(

Package goquery implements features similar to jQuery, including the chainable syntax, to manipulate and query an HTML document.

This package is a character-set conversion library for Go.

taken from http://golang.org/src/pkg/net/ipraw_test.go

通用资源池，动态增加资源实例，并支持空闲资源定时回收功能。

Package session provider

Package websocket implements a client and server for the WebSocket protocol as specified in RFC 6455.

[spider frame (golang)] Pholcus（幽灵蛛）是一款纯Go语言编写的高并发、分布式、重量级爬虫软件，支持单机、服务端、客户端三种运行模式，拥有Web、GUI、命令行三种操作界面；规则简单灵活、批量任务并发、输出方式丰富（mysql/mongodb/csv/excel等）、有大量Demo共享；同时她还支持横纵向两种抓取模式，支持模拟登录和任务暂停、取消等一系列高级功能； （官方QQ群：Go大数据 42731170，欢迎加入我们的讨论）。