使用requests构造一个携带参数的get请求使用requests发送请求如果不设置请求头,则默认的请求头是python-requests/requests版本号
2019年9月15日 08:23 Python 爬虫
selenium是一个网页自动化测试工具,使用它可以操作浏览器来模拟人操作浏览器的行为
2019年9月7日 15:42 定位元素 Python Scrapy 爬虫 导出 selenium
requests这个库,如果直接利用get()或者post()等方法可以做到模拟网页的请求,但是每一次请求之间是没有关系的,相当于不同的会话也就是相当于浏览器打开了两个不同的页面
2019年5月4日 10:41 Python Scrapy 爬虫 session 请求头 抓包 协议
原因是 Python requests 设置verify=False移除SSL认证
2019年1月1日 09:22 Python Scrapy 爬虫 请求头 抓包 协议
GET:请求指定的页面信息,并返回数据 HEAD:类似于GET请求,只不过返回的响应中没有具体的内容,用户获取报头 POST:向指定的资源提交数据进行处理,数据被包含在请求体中 PUT:从客户端向服务器传输的数据取代指定的文档内容 DELETE:请求服务器删除指定的页面
2018年12月14日 07:57 爬虫 请求头 协议