我最近在琢磨scrapy爬虫框架,在windows中安装scrapy遇到了不少坑;直接 pip install scrapy 安装不成功的,百度说要安装vc2008+等等,安装这些时间太长,最后找到一种方法,是经过编译之后的scrapy,直接安装就ok。
下面就是安装步骤:
1、去该网址下载:scrapy,Twisted
http://www.lfd.uci.edu/~gohlke/pythonlibs/
在这里下载你python对应的.whl文件
2、安装Twisted,scrapy:
记得先安装Twisted(pip install xxxxx.whl)
然后再安装scrapy,否则会报错的
3、安装pywin32
如果不安装pywin32时,直接scrapy会报错:No model named win32api
在该网址下载:https://sourceforge.net/projects/pywin32/files/pywin32/
可以下载exe文件直接双击安装
最后,安装上面的步骤在windows可以很快安装好,少走弯路,节约时间。