selenium是一个网页自动化测试工具，使用它可以操作浏览器来模拟人操作浏览器的行为
2020年10月23日 00:00 定位元素 Python Scrapy 爬虫 导出 selenium
import requests url = "http://steamworkshop.download/online/steamonline.php" data = {"item": "1355236618", "app": "431960"} # 替换item为壁纸id即可 res = requests.post(url, data=data).text print(res)
2020年7月21日 08:38 Scrapy 爬虫 导出 请求头 抓包
selenium是一个自动化测试工具，利用它我们可以控制浏览器执行特定的动作，比如点击，下拉，刷新，输入等操作。对于一些JavaScript渲染的页面来说，这种抓取方式非常有效，下面来看一下selenium的安装过程
2020年4月29日 04:03 定位元素 Python Scrapy 爬虫 selenium
selenium是一个网页自动化测试工具，使用它可以操作浏览器来模拟人操作浏览器的行为
2019年9月7日 15:42 定位元素 Python Scrapy 爬虫 导出 selenium
requests这个库，如果直接利用get()或者post()等方法可以做到模拟网页的请求，但是每一次请求之间是没有关系的，相当于不同的会话也就是相当于浏览器打开了两个不同的页面
2019年5月4日 10:41 Python Scrapy 爬虫 session 请求头 抓包 协议