pyspider的介绍

pyspider 是由 binux 开发的具有以下特性的开源 python 爬虫程序：

• 抓取、更新调度多站点的特定的页面
• 需要对页面进行结构化信息提取
• 灵活可扩展，稳定可监控

https://github.com/binux/pyspider

http://docs.pyspider.org/en/latest/

http://demo.pyspider.org/

• debian安装教程：https://imlonghao.com/9.html
• 组建分布式集群教程：https://imlonghao.com/10.html

http://blog.binux.me/