CentOS 6.4 安装搭建 Scrapy 0.22 环境

1、安装Python2.7.6

  1. 更新CentOS lib库文件
    python

    yum -y update
  2. 安装开发工具包
    git

    yum groupinstall -y development
  3. 安装扩展包
    github

    yum install -y zlib-dev openssl-devel sqlite-devel bzip2-devel
  4. 下载Python2.7.6
    sql

    wget http://www.python.org/ftp/python/2.7.6/Python-2.7.6.tar.xz
  5. 解压Python2.7.6
    python2.7

    tar -xvf Python-2.7.6.tar.xz
  6. 进入Python2.7.6目录
    curl

    cd Python-2.7.6
  7. 编译安装Python2.7.6
    scrapy

    ./configure
    make && make altinstall

2、解决Yum不支持Python2.7的问题

  1. 将老的Python程序进行备份
    工具

    mv /usr/bin/python /usr/bin/python2.6.6
  2. 创建新的Python连接
    开发工具

    ln -s /usr/local/bin/python2.7 /usr/bin/python
  3. 修改/usr/bin/yum文件
    url

    vi /usr/bin/yum

    将第一行的 #!/usr/bin/python 改成 #!/usr/bin/python2.6.6

3、安装setuptools 和 pip

  1. 下载setuptools

    wget --no-check-certificate https://pypi.python.org/packages/source/s/setuptools/setuptools-1.4.2.tar.gz
  2. 解压setuptools

    tar -xvf setuptools-1.4.2.tar.gz
  3. 进入setuptools目录

    cd setuptools-1.4.2
  4. 经过已安装的Python2.7.6安装setuptools

    python setup.py install
  5. 安装 pip

    easy_install pip
  6. curl https://raw.github.com/pypa/pip/master/contrib/get-pip.py | python2.7 -

 

4、安装libxslt-devel支持lxml

yum install libxslt-devel

5、安装Scrapy

pip install scrapy
相关文章
相关标签/搜索