如何用Python正则库编写示例代码抓取淘宝商品详情页信息？

本文共计842个文字，预计阅读时间需要4分钟。

使用正则库爬取淘宝商品信息，首先需确定想爬取的对象。在淘宝搜索python，结果中可得到搜索商品的URL，从URL中可以看出，搜索商品的关键字以q=开头，因此我们可以使用q=作为起始点。

使用正则库爬取淘宝商品的商品信息，首先我们需要确定想要爬取的对象

我们在淘宝里搜索“python”,出来的结果

从url连接中可以得到搜索商品的关键字是“q=”，所以我们要用的起始url为：s.taobao.com/search?q=python

然后翻页，经过对比发现，翻页后，变化的关键字是s，每次翻页，s便以44的倍数增长（可以数一下每页显示的商品数量，刚好是44）
所以可以根据关键字“s=”，来设置爬取的深度（爬取多少页）

右键查看源码，商品名称可能的关键字是“title”和“raw_title”，进一步多看几个商品的名称，发现选取“raw_title”比较合适；商品价格自然就是“view_price”(通过比对淘宝商品展示页面)；所以商品名称和商品价格分别是以"raw_title":"名称"和"view_price":"价格"，这样的键/值对的形式展示的。