requests这个库，如果直接利用get()或者post()等方法可以做到模拟网页的请求，但是每一次请求之间是没有关系的，相当于不同的会话也就是相当于浏览器打开了两个不同的页面
2019年5月4日 10:41 Python Scrapy 爬虫 session 请求头 抓包 协议
原因是 Python requests 设置verify=False移除SSL认证
2019年1月1日 09:22 Python Scrapy 爬虫 请求头 抓包 协议
GET：请求指定的页面信息，并返回数据 HEAD：类似于GET请求，只不过返回的响应中没有具体的内容，用户获取报头 POST：向指定的资源提交数据进行处理，数据被包含在请求体中 PUT：从客户端向服务器传输的数据取代指定的文档内容 DELETE：请求服务器删除指定的页面
2018年12月14日 07:57 爬虫 请求头 协议
它是互联网上应用最为广泛的一种网络协议，当我们在浏览器地址栏输入一个URL或者单击一个链接的时候，URL就确定了要浏览的内容地址是什么。浏览器就通过HTTP/HTTPS，将服务器上的网页代码提取出来，并翻译成漂亮的网页。
2018年8月22日 13:58 协议