个人系统是 Win7,首先,你要有Python,我用的是2.7.11版本,Python3相仿,只是一些源文件不一样。html
官网文档:http://doc.scrapy.org/en/latest/intro/install.html,官网的实在‘正常状况下’,亲身体验过程绝对遇到一大堆大坑。python
1.安装Pythonbootstrap
安装过程我就很少说啦,个人电脑中已经安装了 Python 2.7.11 版本啦,安装完以后记得配置环境变量,好比个人安装在D盘,D:\python2.7.11,就把如下两个路径添加到Path变量中windows
1python2.7 |
D:\python27;D:\python27\Scriptsscrapy |
配置好了以后,在命令行中输入 python –version ,或-V,若是没有提示错误,则安装成功工具
2.安装pywin32ui
在windows下,必须安装pywin32,安装地址:http://sourceforge.net/projects/pywin32/spa
下载对应版本的pywin32,直接双击安装便可,安装完毕以后验证:.net
在python命令行下输入
import win32com
若是没有提示错误,则证实安装成功
3.安装pip
pip是用来安装其余必要包的工具,首先下载 get-pip.py
下载好以后,选中该文件所在路径,执行下面的命令
1 |
python get-pip.py |
执行命令后便会安装好pip,而且同时,它帮你安装了setuptools
安装完了以后在命令行中执行
1 |
pip --version |
若是提示以下,说明就安装成功了,若是提示不是内部或外部命令,那么就检查一下环境变量有没有配置好吧。
4.安装pyOPENSSL(个人坑)
在Windows下,是没有预装pyOPENSSL的,而在Linux下是已经安装好的。
安装地址 https://pypi.python.org/pypi/pyOpenSSL#downloads 后缀为.whl 的命令 pip install *.whl
5.安装 lxml
lxml的详细介绍 点我 ,是一种使用 Python 编写的库,能够迅速、灵活地处理 XML
直接执行以下命令
1 |
pip install lxml |
就可完成安装,若是提示 Microsoft Visual C++库没安装,则 点我 下载支持的库。
或者 easy_install lxml
6.安装Scrapy
最后就是激动人心的时刻啦,上面的铺垫作好了,咱们终于能够享受到胜利的果实啦!
执行以下命令
1 |
pip install Scrapy |
加入没有上面的,而是遇到下面的
请去https://pypi.python.org/pypi/pyOpenSSL#downloads下载.whl,而后运行
pip 会另外下载其余依赖的包,这些就不要咱们手动安装啦,等待一会,大功告成!
7.验证安装
输入 Scrapy
若是提示以下命令,就证实安装成功啦,若是失败了,请检查上述步骤有何疏漏。
我参考这篇文章http://cuiqingcai.com/912.html,而后加上我遇到的坑