Scrapy应用中如何配置三种不同方式的cookies设置技巧?

2026-05-16 22:420阅读0评论SEO问题
  • 内容介绍
  • 文章标签
  • 相关推荐

本文共计396个文字,预计阅读时间需要2分钟。

Scrapy应用中如何配置三种不同方式的cookies设置技巧?

Python 3.6 以上版本中,Scrapy 框架配置 cookie 有三种方式。第一种:在 setting 文件中设置 cookie。当 COOKIES_ENABLED 被注释时,Scrapy 默认没有开启 cookie;当 COOKIES_ENABLED 没有注释且设置为 False 时,Scrapy 也不会开启 cookie。

本人是python3.6

总的来说,scrapy框架中设置cookie有三种方式。

第一种:setting文件中设置cookie

当COOKIES_ENABLED是注释的时候scrapy默认没有开启cookie

当COOKIES_ENABLED没有注释设置为False的时候scrapy默认使用了settings里面的cookie

当COOKIES_ENABLED设置为True的时候scrapy就会把settings的cookie关掉,使用自定义cookie

所以当我使用settings的cookie的时候,又把COOKIES_ENABLED设置为True,scrapy就会把settings的cookie关闭,

而且我也没使用自定义cookie,导致整个请求根本没有cookie,导致获取页面失败。

阅读全文
标签:方法

本文共计396个文字,预计阅读时间需要2分钟。

Scrapy应用中如何配置三种不同方式的cookies设置技巧?

Python 3.6 以上版本中,Scrapy 框架配置 cookie 有三种方式。第一种:在 setting 文件中设置 cookie。当 COOKIES_ENABLED 被注释时,Scrapy 默认没有开启 cookie;当 COOKIES_ENABLED 没有注释且设置为 False 时,Scrapy 也不会开启 cookie。

本人是python3.6

总的来说,scrapy框架中设置cookie有三种方式。

第一种:setting文件中设置cookie

当COOKIES_ENABLED是注释的时候scrapy默认没有开启cookie

当COOKIES_ENABLED没有注释设置为False的时候scrapy默认使用了settings里面的cookie

当COOKIES_ENABLED设置为True的时候scrapy就会把settings的cookie关掉,使用自定义cookie

所以当我使用settings的cookie的时候,又把COOKIES_ENABLED设置为True,scrapy就会把settings的cookie关闭,

而且我也没使用自定义cookie,导致整个请求根本没有cookie,导致获取页面失败。

阅读全文
标签:方法