小白学 Python 爬虫（2）：前置准备（一）基本类库的安装
人生苦短，我用 Python
前文传送门：
本篇内容较长，各位同学可以先收藏后再看~~ 在开始讲爬虫之前，还是先把环境搞搞好，工欲善其事必先利其器嘛~~~ 本篇文章主要介绍 Python 爬虫所使用到的请求库和解析库，请求库用来请求目标内容，解析库用来解析请求回来的内容。 首先介绍小编本地的开发环境： 差不多就这些，最基础的环境，其他环境需要我们一个一个安装，现在开始。 虽然 Python 为我们内置了 HTTP 请求库 urllib ，使用姿势并不是很优雅，但是很多第三方的提供的 HTTP 库确实更加的简洁优雅，我们下面开始。 Requests 类库是一个第三方提供的用于发送 HTTP 同步请求的类库，相比较 Python 自带的 urllib 类库更加的方便和简洁。 Python 为我们提供了包管理工具 pip ，使用 pip 安装将会非常的方便，安装命令如下： 验证： 首先在 CMD 命令行中输入 python ，进入 python 的命令行模式，然后输入 Selenium 现在更多的是用来做自动化测试工具，相关的书籍也不少，同时，我们也可以使用它来做爬虫工具，毕竟是自动化测试么，利用它我们可以让浏览器执行我们想要的动作，比如点击某个按钮、滚动滑轮之类的操作，这对我们模拟真实用户操作是非常方便的。 安装命令如下： 验证： 这样没报错我们就安装完成，但是你以为这样就算好了么？图样图森破啊。 我们还需要浏览器的支持来配合 接下来，安装 Chrome 浏览器就不用讲了吧。。。。 再接下来，我们开始安装 ChromeDriver ，安装了 ChromeDriver 后，我们才能通过刚才安装的 首先，我们需要查看自己的 Chrome 浏览器的版本，在 Chrome 浏览器右上角的三个点钟，点击 帮助 -> 关于，如下图： 将这个版本找个小本本记下来，小编这里的版本为： 版本 78.0.3904.97（正式版本） （64 位） 接下来我们需要去 ChromeDriver 的官网查看当前 Chrome 对应的驱动。 官网地址： https://sites.google.com/a/chromium.org/chromedriver/ 因某些原因，访问时需某些手段，访问不了的就看小编为大家准备的版本对应表格吧。。。开发环境
请求库
Requests
pip install requestsC:\Users\inwsy>python Python 3.7.4 (tags/v3.7.4:e09359112e, Jul 8 2019, 20:34:20) [MSC v.1916 64 bit (AMD64)] on win32 Type "help", "copyright", "credits" or "license" for more information. >>> import requestsimport requests 如果没有任何错误提示，说明我们已经成功安装 Requests 类库。Selenium
pip install seleniumC:\Users\inwsy>python Python 3.7.4 (tags/v3.7.4:e09359112e, Jul 8 2019, 20:34:20) [MSC v.1916 64 bit (AMD64)] on win32 Type "help", "copyright", "credits" or "license" for more information. >>> import seleniumChromeDriver
selenium 的工作，开发人员嘛，常用的浏览器莫非那么几种：Chrome、Firefox，那位说 IE 的同学，你给我站起来，小心我跳起来打你膝盖，还有说 360 浏览器的，你们可让我省省心吧。![](upload/201911221022121845.gif") 25px 0px no-repeat; border: 2px solid rgb(239, 239, 239); min-height: 35px; line-height: 1.6em; color: rgb(51, 51, 51);)
selenium 来驱动 Chrome 来完成各种骚操作。
| ChromeDriver Version | Chrome Version |
|---|---|
| 78.0.3904.11 | 78 |
| 77.0.3865.40 | 77 |
| 77.0.3865.10 |