HTTP网络协议(学习笔记六)

HTTP网络协议(六)

19~20课

19.HTTPS

安全这种东西是相对的,尽可能提高安全性

HTTP(HyperText Transfer Protocol Secure),译为:超文本传输安全协议

常称为HTTP over TLS、HTTP over SSL、HTTP Secure

由网景公司于1994年首次提出

HTTPS的默认端口号是443(HTTP是80)

现在在在浏览器输入http://www.baidu.com

会自动重定向到https://www.baidu.com

SSL/TLS

-HTTPS是在HTTP的基础上使用SSL/TLS来加密保文,对窃听和中间人攻击提供合理的防护

-SSL/TLS也可以用在其他协议上,比如

FTP —> FTPS

SMTP —-> SMTPS

TLS(Transport Layer Secure),译为:传输层安全协议

-前身是SSL(Secure Sockets Layer),译为:安全套接层

历史版本信息

SSL1.0:因为存在严重的安全漏洞,从未公开过

SSL2.0:1995年,已于2011年弃用(RFC_6176)

SSL3.0:1996年,已于2015年弃用(RFC_7568)

TLS1.0:1999年(RFC_2246)

TLS1.1:2006年(RFC_4346)

TLS1.2:2008年(RFC_5246)

TLS1.3:2018年(RFC_8446)

SSL/TLS — 工作在哪一层

应用层和传输层之间

OpenSSL

OpenSSL是SSL/TLS协议的来源实现,始于1998年,支持Windows、Mac、Linux等平台

Linux、Mac一般自带OpenSSL

WIndows下安装OpenSSL :https://

常用的命令

生成私钥:openssl genrsa -out mj.key

生成公钥:openssl rsa -in my.key -public -out mj.pem

可以使用OpenSSL构建一套属于自己的CA,自己给自己颁发证书,称为“自签名证书”

HTTPS的成本

证书的成本

加解密计算(消耗更多CPU资源,降低访问速度。比HTTP访问稍微慢一点)

降低访问速度

有些企业的做法是,包含敏感数据的请求才使用HTTPS,其他保留使用HTTP

HTTPS的通信过程

总的可以分为三大阶段

1.TCP的三次握手

2.TLS的连接

3.HTTP的请求和响应

TLS1.2的连接

大概有10大步骤(省略了ACK步骤)

1.Client Hello

-TLS的版本

-支持加密的组件(Cipher Suite)等

加密组件是指所使用的加密算法及密钥长度等

-一个随机数(Client Random)

2.Server Hello

-TLS的版本号

-选择的加密组件

是从接收到的客户端加密组件列表中挑选出来的

3.Certificate

-服务器的公钥证书(被CA签名过的)

4.Server Key Exchange

-用以实现ECDHE算法的其中一种参数(Server Params)

ECDHE是一种密钥交换算法

为了防止伪造,Server Params经过了服务器私钥签名

5.Sever Hello Done

-告知服务端:协商部分结束了

-到目前为止:客户端和服务器之间通过明文共享了

Client Random、Server Random、 Server Params

-而且,客户端也已经拿到了服务器的公钥证书,接下来,客户端会验证证书的真实性

6.Client Key Exchange

-用以实现ECDHE算法的另一个参数(Client Params)

-目前为止,客户端和服务器都拥有了ECDHE算法需要两个参数:Server Param、Client Params

-客户端,服务器都可以

使用ECDHE算法根据Server Params、Client Params 计算出一个新的随机密钥串:Pre-master secret

然后结合Client Random、Server Random、Pre-master secret 生成主密钥

最后利用主密钥衍生出其他密钥:客户端发送用的会话密钥,服务端阿松的会话密钥等

7.Change Cipher Spec

告知服务器:之后的通信会采用计算出来的会话密钥进行加密

8.Finished

-包含连接至今全部保文的整体校验值(摘要),加密之后发给服务器

-这次握手协商是否成功,要以服务器是否能够正确解密该保文

9.10Change Cipher Spec、Finished

-到此为止,客户服务器都验证加密解密没问题,握手正式结束

-后面开始传输加密的HTTP请求和加密了

20.SPDY_QUIC_HTTP2+HTTP3

TLS1.2连接

ECDHE密钥加密算法

HTTP协议的不足(HTTP/1.1)

-同一时间,一个连接智能对应一个请求

针对同一个域名,大多数浏览器允许最多6个并发连接

-允许客户端主动发起请求

一个请求只能对应一个响应

-同一个回话的多次请求中,头消息会被重复传输

通常会给每个传输增加500-800字节的开销

如果使用Cookie, 增加的开销有时会达到上千字节

SPDY

SPDY(speedy的缩写),是基于TCP的应用层协议,它强制要求使用SSL/TLS

2009年11月,Google宣布将SPDY作为提高网络速度的内部项目

SPDY与HTTP的关系

SPDY并不用于取代HTTP,它只是修改了HTTP请求与响应的传输方式

SPDY与HTTP的关系

SPDY并不用于取代HTTP,它只是修改了HTTP请求与响应的传输方式

只需要增加一个SPDY层,现有的所有服务端应用均不用做任何修改

SPDY是HTTP/2的前身

2015年9月,Google宣布移除对SPDY的支持,用到HTTP/2

HTTP/2

HTTP/2,于2015年5月以RFC_7540正式发表

根据W3Techs的数据,截至2019年6月,全球有36.5%的网站支持了HTTP/2

不强求使用SSL/TLS,但商业使用中基本都是用了SSL/TLS安全层

HTTP1.1和HTTP/2速度对比

http://www.http2demo.io/

https://http2.akamai.com/demo

HTTP/2在底层传输做了很多的改进和优化,但在语意上完全与HTTP/1.1兼容

比如请求方法(如GET、POST)、Status Code、各种Headers等都没有改变

因此,想要升级到HTTP/2(只是应用层面的东西)

-开发者不需要修改任何代码

-只需要升级服务器配置、升级浏览器

底层操作系统内核就不好改,需要微软修改windows内核代码,太难了(TCP IP)

HTTP/2的特性- 二进制格式

-HTTP/2采用二进制格式传输数据,而非HTTP1.1的文本格式

-二进制格式在协议的解析和优化扩展上带来很多优势和可能

数据流:已建立的连接内的双向字节流,可以承载一条或多条消息

-所有通信都在一个TCP连接上完成,此连接可以承载任意数字的双向数据流

消息:于逻辑HTTP请求或响应消息对应,由一些列帧组成

帧:HTTP/2通信的最小单位,每个帧都包含帧头(会标识出当前帧所属的数据流)

来自不同数据流的帧可以交错发送,然后在根据每个帧头的数据流标识符重新组装

HTTP/2的特性 - 多路复用(Multipxing)

-客户端和服务器可以将HTTP消息分解为互不依赖的帧,然后交错发送,最后再在另一端把它们重新组装起来

-并行交错地发送多个请求,请求之间互不影响

-并行交错地发送多个响应,响应之前互不干扰

-使用一个连接并行发送多个请求和响应

-不必在为绕过HTTP/1.1限制而做很多工作

比如把image sprites、合

并CSS\CS、内嵌CSS\JS\Base64图片、域名分片等

精灵图片

image sprites(也叫做CSS Sprites), 将多张小图合并成一张大图

最后通过CSS结合小图的位置,尺寸进行精准定位

HTTP/2的特性 - 优先级

HTTP/2标准允许每个数据流都有一个关联的权重和依赖关系

-可以向每个数据流分配一个介于1~256之间的整数

-每个数据流与其他数据流之间可以存在显示依赖关系

每个客户端可以构建和传递“优先级树”,表明他倾向于如何接受响应

服务器可以使用此消息通过CPU、内存、和其他资源的分配设定数据流处理的优先级

-再资源数据可用之后,确保高优先级响应以最快方式传输至客户端

尽可能先给父数据流分配资源

同级数据流(共享相同父项)应按其权重比例分配资源


HTTP2004.JPG

HTTP/2的特性 - 头部压缩

HTTP/2的使用HPACK压缩请求头和响应头

-可以极大减少头部,进而提高性能

早期版本的HTTP/2和SPDY使用zlib压缩

-早期将所传输头数据的大小减少85%~88%

-但在2021年夏天,被攻击导致会话劫持

-后被更安全的HPACK取代

HTTP/2的特性 - 服务器推送(Server Push)

服务器可以对一个客户端请求发送多个响应

-除了最初请求的响应外,服务器还可以向客户端推送额外资源,而无需客户端额外明确的请求

HTTP/2的问题 - 对头阻塞(Head of line blocking)

QUIC

HTTP/2的问题 - 握手延迟

QUIC 0ms 可以办到0RTT建立连接

RTT(Round trip time): 往返时延,可以简单理解为通信一来一回的时间

HTTP/3

Google 觉得HTTP/2仍不够快,于是有了HTTP/3

-HTTP/3由Google开发,弃用了TCP协议,改为使用基于UDP协议的QUIC协议实现

-QUIC(Quic UDP Internet Connections),译为快速UDP网络连接,由Google开发,在2013年实现

-于2018年从HTTP-over-QUIC改为HTTP/3
![Bull pptx] - PowerPoint.JPG](https://upload-images.jianshu.io/upload_images/1623463-93a14572e15c71ff.JPG?imageMogr2/auto-orient/strip%7CimageView2/2/w/1240)

HTTP/3 - 疑问

HTTP/3基于UDP,如何保证可靠传输?

-由QUIC来保证,它来编写可靠传输代码。只要有一层保证可靠传输就可以了。

假设UDP层丢了数据,QUIC层会告诉服务端,丢失了哪一部分请重发

-为何Google不开发一个新的不同于TCP、UDP的传输层协议?

1.目前世界上的网络设备基本只认识TCP、UDP(UDP没有传输阻塞的问题,QUIC可靠部分就由Google处理好啦)

2.如果要修改传输层,意味着操作系统的内核也要修改

3.另外,由IETF标准化的许多TCP新特性都因缺乏广泛支持而没有得到广泛的部署或使用

4.因此,想要开发并应用一个新的传输层协议,是极其困难的一件事情

HTTP/3的特性 - 连接迁移

TCP基于4要素(源IP、源接口、源IP、目标端口)

-切换网络时,至少会有一个要素发生变化,导致连接发生变化

-当连接发生变化时,如果还使用原来的TCP连接,则会导致连接失败,就得等原来的连接超时后重新建立连接

-所以我们有时候发现切换到一个新网络时,即使新网络状况良好,但内容还是需要加载很久

-如果实现得很好,当检测到网络变化时立刻建立新的TCP连接,即使这样,建立新的连接还是需要几百浩渺的时间。

QUIC的连接不受4要素的影响,当4要素发生变化时,原连接依然维持

-QUIC连接不以4要素的影响,当4要素发生变化时,原连接依然维持

-即使IP或者端口发生变化,只要connection ID没有变化,那么连接依然可以维持

-比如

当设备连接到Wi-Fi时,将进行中的下载从蜂窝网络连接转移到更快速的Wi-Fi连接

当Wi-Fi连接不再可用时吗,将连接转移到蜂窝网络连接

HTTP/3的问题 - 操作系统内核、CPU负载

据Google和FaceBook称,于基于TLS的HTTP/2相比,它们大规模部署QUIC需要近2倍的CPU使用量

-Linux内核的UDP部分没有得到像TCP那样的优化,因为传统上没有使用UDP进行如此高速的的信息传输

-TCP和TLS有硬件加速,而这对于UDP很罕见,对于QUIC则基本不存在

随着时间的推移,相信这个问题会逐步得到改善

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 211,348评论 6 491
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,122评论 2 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 156,936评论 0 347
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,427评论 1 283
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,467评论 6 385
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,785评论 1 290
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,931评论 3 406
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,696评论 0 266
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,141评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,483评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,625评论 1 340
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,291评论 4 329
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,892评论 3 312
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,741评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,977评论 1 265
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,324评论 2 360
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,492评论 2 348

推荐阅读更多精彩内容