如何用Python编写长尾词小说下载网站爬虫？

本文共计726个文字，预计阅读时间需要3分钟。

基本开发环境：Python 3.6 + Pycharm + 相关模块目标网页分析：目标网页内容，输入想看的小故事内容点击搜索：这里会返回很多结果，我只选择第一个网页数据：是静态数据，但需要进行搜索，是POST请求，需要‘

基本开发环境

· Python 3.6

· Pycharm

相关模块使用

目标网页分析

输入想看的小说内容，点击搜索

这里会返回很多结果，我只选择第一个

网页数据是静态数据，但是要搜索，是post请求，需要提价data参数，如下图所示：

然后通过解析网站数据，获取第一个小说i的详情页url即可

静态网页的获取，难度是不大的。