Scrapy应用中如何配置三种不同方式的cookies设置技巧?
- 内容介绍
- 文章标签
- 相关推荐
本文共计396个文字,预计阅读时间需要2分钟。
Python 3.6 以上版本中,Scrapy 框架配置 cookie 有三种方式。第一种:在 setting 文件中设置 cookie。当 COOKIES_ENABLED 被注释时,Scrapy 默认没有开启 cookie;当 COOKIES_ENABLED 没有注释且设置为 False 时,Scrapy 也不会开启 cookie。
本人是python3.6
总的来说,scrapy框架中设置cookie有三种方式。
第一种:setting文件中设置cookie
当COOKIES_ENABLED是注释的时候scrapy默认没有开启cookie
当COOKIES_ENABLED没有注释设置为False的时候scrapy默认使用了settings里面的cookie
当COOKIES_ENABLED设置为True的时候scrapy就会把settings的cookie关掉,使用自定义cookie
所以当我使用settings的cookie的时候,又把COOKIES_ENABLED设置为True,scrapy就会把settings的cookie关闭,
而且我也没使用自定义cookie,导致整个请求根本没有cookie,导致获取页面失败。
本文共计396个文字,预计阅读时间需要2分钟。
Python 3.6 以上版本中,Scrapy 框架配置 cookie 有三种方式。第一种:在 setting 文件中设置 cookie。当 COOKIES_ENABLED 被注释时,Scrapy 默认没有开启 cookie;当 COOKIES_ENABLED 没有注释且设置为 False 时,Scrapy 也不会开启 cookie。
本人是python3.6
总的来说,scrapy框架中设置cookie有三种方式。
第一种:setting文件中设置cookie
当COOKIES_ENABLED是注释的时候scrapy默认没有开启cookie
当COOKIES_ENABLED没有注释设置为False的时候scrapy默认使用了settings里面的cookie
当COOKIES_ENABLED设置为True的时候scrapy就会把settings的cookie关掉,使用自定义cookie
所以当我使用settings的cookie的时候,又把COOKIES_ENABLED设置为True,scrapy就会把settings的cookie关闭,
而且我也没使用自定义cookie,导致整个请求根本没有cookie,导致获取页面失败。

