爬虫入门到精通-环境的搭建

环境的安装

本文章属于爬虫入门到精通系统教程第二讲html

IDE的安装

IDE我用的是VS code,也用过pycharm(可是电脑配置不行,比较卡)python

VScode安装教程在这,写的蛮清楚的linux

而后安装一个python的插件就行
见以下截图chrome

  • 点击数字1的地方ubuntu

  • 在数字2的地方输入pythonsegmentfault

  • 点击python 0.5.8 右边的安装按钮windows

包的安装

配置pip源,不配置的话下载速度很慢

windows:在当前用户根目录下,建立pip这个文件夹,而后在里面新建一个文件pip.in 里面的内容为浏览器

[global]
index-url = http://mirrors.aliyun.com/pypi/simple/
[install]
trusted-host=mirrors.aliyun.com

截图以下(我当前用户名为kimga
网站

linux:在~/.pip/pip.conf文件中添加或修改(内容同上)ui

包的安装

直接pip install 包的名字
pip install requests

依次安装以下4个包

  1. requests

  2. lxml

  3. ipython

  4. jupyter

若是发现报错的话,

  • ubuntu用apt-get install python-包名

    • apt-get install python-lxml

  • windows 在[Unofficial Windows Binaries for Python Extension Packages
    ](http://www.lfd.uci.edu/~gohlk...这个网站上手动下载而后安装(这个网站有各类python windows扩展包,pip install 报错的话,就能够到这个网站上下载安装

windows下pip install lxml 不多能安装成功。。。

那咱们怎么作呢?

  1. 打开Unofficial Windows Binaries for Python Extension Packages这个网址

  2. ctrl+ F,而后在搜索框内输入lxml

  3. 找到与你系统版本相同的包,下载

    • 个人python版本是2.7,系统是64位的,因此我选择lxml‑3.7.3‑cp27‑cp27m‑win_amd64.whl

  4. 下载完成后在你下载的目录下打开cmd命令行

    • 这边有个小技巧是,找到你下载的目录后,按住shift不放,而后空白处右键,会多出来一个在此处打开命令窗口,不用再慢慢的cd过来

  5. 而后pip install 你刚下载的文件,发现就安装成功了

Google浏览器的安装

百度软件中心下载

记得点普通下载(要否则有可能会收获百度全家桶一份)

下载完正常安装就行

安装能够更换浏览器头的插件

  1. 打开 google插件下载这个网页

  2. 在输入框内输入 extension ID ffhkkpnppgnfaobgihpdblnhmmbodake

  3. 点击下载

    ![](http://ww1.sinaimg.cn/large/cfc08357gy1fcvui06zb0j20qw0k80x4)
  4. 下载完成后,打开Google浏览器,在地址栏输入chrome://extensions/

  5. 把刚刚下载的文件拖进去进行

最终效果就下图

总结

看完本篇文章后,你应该要

  • 有一个本身熟悉的python IDE

  • Python配置国内源

  • 能安装python包

  • 有安装Google浏览器

  • 有能够更换浏览器头的插件

最后,由于后续实战我基本上都是用Jupyter notebook来写调试的,因此请阅读如下两篇文章,能大概了解Jupyter notebook

Jupyter Notebook快速入门(上)

Jupyter Notebook快速入门(下)


最后的最后,收藏的大哥们,能帮忙点个赞么~

相关文章
相关标签/搜索