配置安装Scrapy
2016-02-26 00:00
225 查看
一直跟着汪海大神的博客学习爬虫 在看到配置scrapy时发现按照汪海大大的教程出了许许多多奇怪的问题,记录一下解决过程【如果要找安装过程直接拉到末尾】
平台:win 7 python:2.7
参考http://blog.goyiyo.com/archives/1966
采取解决方案:
修改.python安装路径...\Lib\distutils目录下de
msvc9compiler.py.将toolskey = "VS%0.f0COMNTOOLS" % version 直接改为 toolskey = "VS你的版本COMNTOOLS"(243行)
【2010 版VS100COMNTOOLS 2012
版VS110COMNTOOLS 2013版 VS120COMNTOOLS】
2.easy_install
明明已经成功安装openssl了啊【摔!】去网上找了各种版本重装后,终于找到解决方法==
参考http://blog.csdn.net/xinsuixiaofeiyu/article/details/40350067
直接pip.exe
install pyOpenSSL cryptography cffi pycparser即可成功安装,之后就顺利了...
成功安装后的界面:
最后,分享下在查找各种奇怪的问题时发现的资源:
Scrapy 0.25 中文文档
我看到的最好的安装scrapy向导【吐血推荐 要是早点看到这个就能少走一点弯路了_(:з」∠)_
祝愿各位安装过程顺利~
平台:win 7 python:2.7
1.Unable to find vcvarsall.bat
在有vs的情况下出现这个问题简直抓狂。参考http://blog.goyiyo.com/archives/1966
采取解决方案:
修改.python安装路径...\Lib\distutils目录下de
msvc9compiler.py.将toolskey = "VS%0.f0COMNTOOLS" % version 直接改为 toolskey = "VS你的版本COMNTOOLS"(243行)
【2010 版VS100COMNTOOLS 2012
版VS110COMNTOOLS 2013版 VS120COMNTOOLS】
2.easy_install
scrapy时出现:无法打开包括文件:“openssl/aes.h”
明明已经成功安装openssl了啊【摔!】去网上找了各种版本重装后,终于找到解决方法==参考http://blog.csdn.net/xinsuixiaofeiyu/article/details/40350067
直接pip.exe
install pyOpenSSL cryptography cffi pycparser即可成功安装,之后就顺利了...
成功安装后的界面:
最后,分享下在查找各种奇怪的问题时发现的资源:
Scrapy 0.25 中文文档
我看到的最好的安装scrapy向导【吐血推荐 要是早点看到这个就能少走一点弯路了_(:з」∠)_
祝愿各位安装过程顺利~
相关文章推荐
- Python3写爬虫(四)多线程实现数据爬取
- install and upgrade scrapy
- install scrapy with pip and easy_install
- Scrapy的架构介绍
- 爬虫笔记
- Nodejs爬虫进阶教程之异步并发控制
- python使用scrapy解析js示例
- 如何优雅地使用c语言编写爬虫
- Python基于scrapy采集数据时使用代理服务器的方法
- PHP实现简单爬虫的方法
- NodeJS制作爬虫全过程(续)
- PHP爬虫之百万级别知乎用户数据爬取与分析
- 一个PHP实现的轻量级简单爬虫
- nodejs爬虫抓取数据乱码问题总结
- 基于Node.js的强大爬虫 能直接发布抓取的文章哦
- nodejs爬虫抓取数据之编码问题
- python实现爬虫统计学校BBS男女比例(一)
- Python使用爬虫猜密码
- python实现爬虫统计学校BBS男女比例之数据处理(三)