HTTP协议

一、http以及https的概念和区别

HTTPS比HTTP更安全，但是性能低一些

HTTP：超文本传输协议，默认端口号是 80

• 超文本：是指超过文本，不仅限于文本；还包括图片、音频、视频等文件
• 传输协议：是指使用共用约定的固定格式来传递转换成字符串的超文本内容

HTTPS：HTTP+SSL（安全套接字层），即带有安全套接字层的超文本传输协议，默认端口号：443

• SSL对传输的内容（超文本，也就是请求体或响应体）进行加密

可以打开浏览器访问一个URL，右键检查，点击net work，点选一个URL，查看HTTP协议形式

二、常见的请求头与响应头

请求头：

• host 域名
• Connection 长连接
• Upgrade-Insecure-Requests 升级为HTTPS请求
• User-Agent 用户代理，提供系统信息和浏览器信息
• Referer 页面跳转（页面来源），可以用来防盗链
• Cookie 保持会话
• Authorization 用于表示HTTP协议中需要认证资源的认证信息

响应头：

• Set-Cookie 对方服务器设置

三、常见的响应状态码

• 200：成功
• 302：跳转，新的URL在响应的Location头中给出
• 303：浏览器对于POST的响应进行重定向至性的URL
• 307：浏览器对于GET的响应重定向至新的URL
• 403：资源不可用；服务器理解客户请求，但拒绝处理它（没有权限）
• 404：找不不到该页面
• 500：服务器内部错误
• 503：服务器由于维护或者负载过重未能应答，在响应中可能会携带Retry-After响应头；有可能是因为爬虫频繁访问URL，使服务器忽视爬虫的请求，最终返回503响应状态码