在当今的网络世界中，自动化操作网页、精准获取网页信息对于开发者和数据爱好者来说至关重要。今天就来给大家分享如何使用 DrissionPage 库巧妙地完成一系列操作，包括获取指定网页的 cookie 以及精心构造请求头信息，这在模拟浏览器行为、突破部分网站反爬限制等场景中十分实用。
2025年2月7日 17:38 Ubantu 爬虫 session 部署 请求头 抓包 协议 selenium
selenuim登录淘宝，保存cookie时遇到的问题，总而言之，一定要保证添加cookie时浏览器当前的域名和cookie中的域名是一样的，否则会添加失败抛出异常`Message: invalid cookie domain: Cookie 'domain' mismatch (Session info: chrome=110.0.5481.178)`
2024年12月9日 21:14 跨域 Python 爬虫 破解 session 请求头 抓包 协议 selenium
在现代网络环境中，许多网站都具备检测自动化工具（如爬虫）的能力，这给自动化测试和爬虫带来了挑战。Playwright 是一个强大的自动化库，它支持多种浏览器，并提供了绕过这些检测的方法。本文将解析一段使用 Playwright 和 Stealth 模式绕过网站检测的代码。
2024年12月9日 19:35 爬虫 破解 session 请求头 抓包 协议 selenium
首先session是有一级缓存的，目的是为了减少查询数据库的时间，提高效率，一级缓存的生命周期和session是一样的， session.flush()和session.clear()就针对session的一级缓存的处理。
2021年4月15日 01:20 Django session
Cookie；浏览器（客户端）进行本地数据存储的本地机制，它是以键值对的形式来存储数据的，当客户端对服务器发起请求的时候，会自动的对浏览器中保存的cookie信息进行解析解读，方便浏览器来辨别用户身份，识别用户记录等一系列操作的本地数据存储方式。
2019年6月15日 08:47 Django session
requests这个库，如果直接利用get()或者post()等方法可以做到模拟网页的请求，但是每一次请求之间是没有关系的，相当于不同的会话也就是相当于浏览器打开了两个不同的页面
2019年5月4日 10:41 Python Scrapy 爬虫 session 请求头 抓包 协议