scrapy是一个不错的开源爬虫,在windows上安装需要以下组件:
1.setup-tools为了easy_install
2.easy_install w3lib
3. easy_install zope.interface
4.下载scrapy的win32安装包,并安装
4.下载scrapy的win32安装包,并安装
5.下载twisted的win32安装包,并安装
6.windows版lxml安装,去http://pypi.python.org/simple/lxml/下载一个egg文件,然后easy_install *.egg
(转)http://www.cnblogs.com/sharpstill/archive/2012/05/26/2519655.html