<commit_before>## pholcus

Pholcus（幽灵蛛）是一款纯Go语言编写的重量级爬虫软件，清新的GUI界面，优雅的爬虫规则、可控的高并发、任意的批量任务、多种输出方式、大量Demo，支持横纵向两种抓取模式，支持模拟登录和任务取消等，并且考虑了支持分布式布局。

![image](https://github.com/henrylee2cn/pholcus/blob/master/doc/icon.png)

* Latest Release: [Version 0.26 (Jun 17, 2015)](https://github.com/henrylee2cn/pholcus/releases).

* 官方QQ群：Go大数据 42731170    [![Go大数据群](http://pub.idqqimg.com/wpa/images/group.png)](http://shang.qq.com/wpa/qunwpa?idkey=<KEY>)

#### 框架模块

![image](https://github.com/henrylee2cn/pholcus/blob/master/doc/project.png)
<commit_msg>开发版更新。。。<commit_after>## pholcus

Pholcus（幽灵蛛）是一款纯Go语言编写的重量级爬虫软件，清新的GUI界面，优雅的爬虫规则、可控的高并发、任意的批量任务、多种输出方式、大量Demo，支持横纵向两种抓取模式，支持模拟登录和任务取消等，并且考虑了支持分布式布局。

![image](https://github.com/henrylee2cn/pholcus/blob/master/doc/icon.png)

* 稳定版： [Version 0.2.6 (Jun 17, 2015)](https://github.com/henrylee2cn/pholcus/releases).   [此处进入](https://github.com/henrylee2cn/pholcus/tree/master)
* 
* 开发版： [Version 0.3.1 (Jun 23, 2015)](https://github.com/henrylee2cn/pholcus/releases).   [此处进入](https://github.com/henrylee2cn/pholcus/tree/developer)

* 官方QQ群：Go大数据 42731170    [![Go大数据群](http://pub.idqqimg.com/wpa/images/group.png)](http://shang.qq.com/wpa/qunwpa?idkey=<KEY>)

#### 框架模块

![image](https://github.com/henrylee2cn/pholcus/blob/master/doc/project.png)

{'fraction_non_alphanumeric': 0.19489559164733178, 'fraction_numerical': 0.04021655065738593, 'mean_word_length': 6.229050279329609, 'pattern_counts': {'":': 0, '<': 5, '<?xml version=': 0, '>': 5, 'https://': 9, 'lorem ipsum': 0, 'www.': 0, 'xml': 0}, 'pii_count': 0, 'substrings_counts': 0, 'word_list_counts': {'cursed_substrings.json': 0, 'profanity_word_list.json': 0, 'sexual_word_list.json': 0, 'zh_pornsignals.json': 0}}
{'dir': 'git-commits-cleaned', 'id': '2507718', 'n_tokens_mistral': 792, 'n_tokens_neox': 779, 'n_words': 39}