scrapy获取实时cookie

最新推荐文章于 2025-07-05 18:02:05 发布

原创最新推荐文章于 2025-07-05 18:02:05 发布 · 1.2k 阅读

4 ·

CC 4.0 BY-SA版权

文章标签：

#python

笔记专栏收录该内容

9 篇文章

订阅专栏

本文详细介绍了在Scrapy框架中如何使用CookieJar类来提取和管理Cookies。通过实例展示了从响应中提取Cookies并将其转化为字典的过程，为爬虫项目中的会话保持提供了实用的解决方案。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

    from scrapy.http.cookies import CookieJar
    cookie_jar = CookieJar()
    cookie_jar.extract_cookies(response, response.request)
    print(cookie_jar) 
    cookie_dict = dict()
    cookie_list =''
    for k, v in cookie_jar._cookies.items():
        for i, j in v.items():
            for m, n in j.items():
                cookie_dict[m] = n.value
    for i,j in cookie_dict.items():
        print(i,'----------------',j)
    Cookie1 = response.request.headers.getlist('Cookie')