轩辕阁 发表于 2015-8-18 08:42:58

Pholcus 0.5.1 发布,Go 爬虫软件

欢迎加入运维网交流群:263444886  
  Pholcus 0.5.1 发布,更新内容如下:

[*]  添加mysql输出;
[*]  简化添加输出方式的步骤;
[*]  优化json字符串输出;
[*]  改进调度器,提升纵向抓取效率;
[*]  修复因第三方包walk的更新导致单机模式无法启动的问题;
[*]  添加简单的单机模式命令行操作;
[*]  其他一些小的改进。
  更多内容请查看软件主页。
  下载地址:

[*]  Source code (zip)
[*]  Source code (tar.gz)
  
  
  Pholcus(幽灵蛛)是一款纯Go语言编写的重量级爬虫软件,清新的GUI界面,优雅的爬虫规则、可控的高并发、任意的批量任务、多种输出方式、大量Demo,支持横纵向两种抓取模式,支持模拟登录和任务取消等,并且考虑了支持分布式布局。
  
  
页: [1]
查看完整版本: Pholcus 0.5.1 发布,Go 爬虫软件