文章目录HTTP 协议请求响应HTTP 协议协议就是两个计算机之间为了能够流畅的进行沟通而设置的一个君子协定。常见的协议有 TCP/IP, SOAP 协议HTTP 协议SMTP 协议等等……HTTP 协议Hyper Text Transfer Protocol超文本传输协议的缩写是用于从万维网WWW:World Wide Web 服务器传输超文本到本地浏览器的传送协议。直白点儿就是浏览器和服务器之间的数据交互遵守的就是 HTTP 协议。HTTP 协议把一条消息分为三大块内容。无论是请求还是响应都是三块内容请求请求行 - 请求方式 (get/post) 请求 url 地址 协议请求头 - 放一些服务器要使用的附加信息空白, 用于分割请求体 - 一般放一些请求参数响应状态行: 协议, 状态码 (200, 302, 404, 500)响应头: 放一些客户端要使用的一些附加信息空白, 用于分割响应体: 服务区返回的真正客户端要用的内容(HTML, json)等请求头中最常见的一些重要内容 (爬虫需要):User‑Agent请求载体的身份标识 (用啥发送的请求)Referer: 防盗链 (这次请求是从哪个页面来的反爬会用到)cookie: 本地字符串数据信息 (用户登录信息反爬的 token)响应头中一些重要的内容:cookie: 本地字符串数据信息 (用户登录信息反爬的 token)其他字符串 (一般是 token 字样防止各种攻击和反爬)请求方式:GET: 显示提交POST: 隐示提交User‑Agent告诉服务器我是什么浏览器 / 设备爬虫不加 UA 很容易被识别拦截。Referer记录你是从哪个页面跳转过来部分网站用来做防盗链校验。Cookie保存在本地携带登录状态、校验令牌服务器响应头会下发 cookie后续请求头带上它。GET参数拼在 URL 地址栏上看得见POST参数放在请求体里面URL 看不到参数。