如何用Python的Requests库进行长尾词爬虫？

本文共计2089个文字，预计阅读时间需要9分钟。

安装requests库是因为学习过程中使用的Python语言，需要先安装Python。我安装的是Python 3.8，可以通过命令`python --version`查看已安装的Python版本。建议安装Python 3.X及以上版本。

1、安装 requests 库

因为学习过程使用的是 Python 语言，需要提前安装 Python ，我安装的是 Python 3.8，可以通过命令 python --version 查看自己安装的 Python 版本，建议安装 Python 3.X 以上的版本。

安装好 Python 以后可以 直接通过以下命令安装 requests 库。

pip install requests

Ps：可以切换到国内的pip源，例如阿里、豆瓣，速度快
为了演示功能，我这里使用nginx模拟了一个简单网站。
下载好了以后，直接运行根目录下的 nginx.exe 程序就可以了(备注：windows环境下)。
这时本机访问 ：127.0.0.1 ，会进入 nginx 的一个默认页面。

2、获取网页

下面我们开始用 requests 模拟一个请求，获取页面源代码。