[架构设计]应用可伸缩架构分析

引言

网站的伸缩性是指不需要改变服务器的硬件设计,仅仅靠改变应用服务器的部署数量,就可以扩大或缩小服务器的处理能力。一般来说,网站的伸缩性设计可分为两类,一类是根据功能进行物理分离实现伸缩,一类是单一功能通过集群实现伸缩。前者是不同服务器部署不同的服务,提供不同的功能。后者是集群中多台服务器部署相同的服务,提供相同的功能。

方法

依据功能实现伸缩

从网站发展早期,通过增加服务器提高网站处理能力时,新增服务器总是从现有服务器中分离出部分功能和服务。


通过物理实现服务器伸缩.jpg
通过物理实现服务器伸缩.jpg

图1 通过物理实现服务器伸缩

图1所描述的伸缩性就是每次伸缩操作都会有更多的服务器加入网站,新增的服务器用于处理特定的服务。依据功能进行进行架构伸缩的具体实现方案有两种,纵向分离和横向分离。

  • 纵向分离
    纵向分离是指服务根据业务流程上的不同部分分开进行部署,实现系统上的伸缩性,其分离方式如图2所示。

    纵向分离部署实现系统可伸缩性.jpg
    纵向分离部署实现系统可伸缩性.jpg

    图2 纵向分离部署实现系统可伸缩性

  • 横向分离
    横向分离又称为业务分割,其实现方式是将不同的业务模块分离部署,实现可伸缩性,如图3所示。根据系统的性能要求可以将横向分离的力度做到非常小。

    横向分离.jpg
    横向分离.jpg

    图3 横向分离部署实现系统可伸缩性

通过集群实现伸缩

将不同功能分离部署可以实现一定程度的伸缩性,但是随着网站访问量的逐步增加,即使分离到最小力度的独立部署,单一的服务器也不能满足业务规模的需求。此时可以使用服务器的集群,将相同的服务部署到多台服务器上构成一个集群整体对外提供服务。具体来说,集群伸缩性又可分为应用服务器集群伸缩性和数据服务器集群伸缩性。而数据服务集群也可分为缓存数据服务器集群和存储数据服务器集群。

应用服务器集群的伸缩性设计

应用服务器应该被设计成无状态的,即应用服务器不存储请求上下文信息,如果将部署有相同应用的服务器组成一个集群,用户的每一个请求都可以发送到任意一台服务器上去处理,任何一台服务器处理的结果都是相同的。这样只要能将用户请求按照某种规则分发到集群的不同服务器上,就可以构成一个应用服务器集群,每个用户的请求都可能落在不同的服务器上。
如果HTTP请求分发装置可以感知或者可以配置集群服务器的数量,可以及时发现集群中新上线或下线的服务器,并能向新上线的服务器发送请求,停止向已下线的服务器分发请求,那么就实现了应用服务器的伸缩性。在这里,这个HTTP请求分发装置被称为负载均衡服务器。 使用负载均衡服务器实现应用服务器可伸缩架构如图4所示。

负载均衡.jpg
负载均衡.jpg

图4 负载均衡实现系统可伸缩性

负载均衡是大型网站必不可少的技术手段,不但可以实现网站的可伸缩性,同时还可以改善网络的可用性。负载均衡的具体实现也多种多样,可以使用专有硬件也可以使用软件来实现。

HTTP重定向负载均衡

利用HTTP重定向协议实现负载均衡,如图5所示。


请求重定向.jpg
请求重定向.jpg

图5 HTTP请求重定向负载均衡原理

HTTP重定向服务器时一台普通的WEB服务器,其唯一的功能就是根据用户的HTTP请求计算一台真实的WEB服务器地址,并将该WEB服务地址写入HTTP重定向响应中(响应状态码为302)返回给用户浏览器。这种负载均衡的优点是实现比较简单。缺点是浏览器需要两次请求服务器才能进行一次访问,性能较差。其次重定向服务器自身的处理能力有可能成为瓶颈,整个集群的伸缩性规模有限。再者使用HTTP302响应状态码重定向,有可能使搜索引擎判断为SEO作弊,降低搜索引擎排名。

DNS域名解析负载均衡

这是利用DNS进行域名解析请求时进行负载均衡处理的一种方案。每次域名解析请求都会根据负载均衡算法可能计算出一个不同的IP地址,以后该用户对网站的请求都发送到这个地址上。如图6所示。


DNS域名解析.jpg
DNS域名解析.jpg

图6 DNS域名解析负载均衡原理

在DNS服务器中配置多个A纪录,如: www.mysite.com IN A 10.0.0.1、www.mysite.com IN A 10.0.0.2、www.mysite.com IN A 10.0.0.3
优点:将负载均衡的工作交给DNS,省掉了网站的管理维护负载均衡服务器的麻烦,同时许多DNS还提供了了基于地理位置的域名解析,即会将域名解析成距离用户地理位置最近的一个服务器地址,这样可加快用户的访问速度,改善性能。
缺点:目前的DNS是多级DNS,每级DNS都可能对网站的DNS信息进行缓存,当下线某台服务器后,即使修改了DNS,也需要很长时间才能生效。其次,DNS负载均衡的控制权在域名运营商那里,网站无法做更多的改善和更强大的管理。
在实际使用中,大型网站总是部分使用DNS域名解析,利用域名解析作为第一级负载均衡手段。

反向代理负载均衡

反向代理服务器在网络部署上位于WEB服务器之前,其拥有两个网卡,分别拥有内部和外部两套IP地址。在使用中它可以将外部网卡的请求转发到内部网卡连接的网络中的WEB服务器。WEB服务器的响应信息也需要反向代理服务器转发给用户。由于反向代理负载均衡工作在HTTP协议层面,因此也叫作应用层负载均衡。其逻辑架构图如图7所示。


反向代理.jpg
反向代理.jpg

图7 反向代理负载均衡原理

优点:和反向代理服务器部署在一起,部署简单。
缺点:反向代理服务器是所有请求和响应的中转站,其性能可能会成为瓶颈。

IP负载均衡

IP负载均衡是在网络层修改目标IP地址来实现负载均衡,其网络架构图如图8所示。

IP负载均衡.jpg
IP负载均衡.jpg

图8 IP负载均衡原理

IP负载均衡在处理真是物理WEB服务器的响应数据包时比较复杂。WEB服务器的响应包需要先返回到负载均衡服务器,再由负载均衡服务器转发给用户。响应的转发操作主要有两种实现方式:

  1. 源地址转换(SNAT):负载均衡服务器在修改目的地址时同时修改源地址,将数据包源地址修改为自身的地址,这样WEB服务器响应会再次回到自身。
  2. 负载均衡服务器同时作为真实服务器的网关设备,这样所有的响应数据都需要先来到负载均衡服务器上,再进行转发。

优点:在内核进程完成数据分发,较反向代理负载均衡(在应用中分发数据)有更好的处理性能。
缺点:所有的请求和回应都需要经过负载均衡服务器,集群的最大响应和吞吐量不得不受制于负载均衡服务器网卡的最大带宽。对于下载或视频服务等需要大量数据传输的手段而言,难以满足要求。

数据链路负载均衡

数据链路负载均衡是在通信协议的数据链路层修改mac地址,来达到负载均衡的目的。负载均衡数据分发过程中不修改IP地址,只修改mac地址,通过配置真是物理服务器集群所有机器虚拟IP和负载均衡服务器IP地址一致,从而达到不修改数据包源地址和目的地址就可以进行数据分发的目的。由于实际处理请求的真是物理服务器IP和数据请求目的IP一致,不需要通过负载均衡服务器进行地址转换,可将响应数据包直接返回给用户浏览器,避免负载均衡服务器网卡带宽成为瓶颈。这种数据三角传输模式又成为直接路由方式(DR)。数据链路负载均衡网络架构如图9所示。

数据链路.jpg
数据链路.jpg

图7 数据链路负载均衡原理

使用三角传输模式的数据链路层负载均衡是目前大型网站使用最广泛的一种负载均衡手段。在linux平台上最好的链路层负载均衡的开源产品是LVS(Linux Virtual Server)。

负载均衡算法

负载均衡服务器的实现可分为两个部分:

  1. 根据负载均衡算法和WEB服务器列表计算得到集群中一台WEB服务器的地址。
  2. 将请求发送到该地址所对应的WEB服务器上。

具体的负载均衡算法通常有以下几种:

轮询(Round Robin, RR)

所有请求依次呗分发到每台应用服务器上,即每台服务器要处理的请求数目都相同,适合所有服务器硬件都相同的场景。

加权轮询(Weight Round Robin, WRR)

根据应用服务器硬件性能的情况,在轮询的基础上,按照权重将请求分发到每个服务器,性能较高的服务器处理更多的请求。

随机(Random)

请求被随机分配到各个应用服务器。随机也可以使用加权。

最少连接(Least Connections)

纪录每个服务器正在处理的连接数,将新到的请求分发到最少连接的服务器上。最少连接最符合负载均衡的定义,同样最少连接算法也能够使用加权。

源地址散列(Source Hashing)

根据请求来源的IP地址进行hash计算,得到应用服务器,这样来自同一个IP地址的请求总在同一个服务器上处理,请求的上下文信息可以存储在这台服务器上,在一个会话周期内重复使用,从而实现会话黏滞。

引用

本文是对可伸缩架构的学习笔记,笔记的内容并非是原创,而是大量参考其它资料。在写作本文的过程中引用了以下资料,为为在此深深谢过以下资料的作者。

  1. 《大型网站技术架构·核心原理与案例分析》 李智慧 2013 电子工业出版社

关于

我的github: https://github.com/weiwei02/
我相信技术能够改变世界。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 211,423评论 6 491
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,147评论 2 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 157,019评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,443评论 1 283
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,535评论 6 385
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,798评论 1 290
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,941评论 3 407
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,704评论 0 266
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,152评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,494评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,629评论 1 340
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,295评论 4 329
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,901评论 3 313
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,742评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,978评论 1 266
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,333评论 2 360
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,499评论 2 348

推荐阅读更多精彩内容

  • 可伸缩性架构指的是:不改变网站的软硬件设计,只通过改变部署的服务器数量就可以扩大或缩小网站的服务处理能力。 大型网...
    deniro阅读 2,707评论 4 52
  • 【摘要】 面对大量用户访问、高并发请求,海量数据,可以使用高性能的服务器、大型数据库,存储设备,高性能Web服务器...
    静修佛缘阅读 4,539评论 0 24
  • Spring Cloud为开发人员提供了快速构建分布式系统中一些常见模式的工具(例如配置管理,服务发现,断路器,智...
    卡卡罗2017阅读 134,629评论 18 139
  • 网站的伸缩性是指不需要改变网站的软硬件设计,仅仅通过部署的服务器的数量就可以扩大或缩小网站的服务处理能力。网站的伸...
    maxwellyue阅读 273评论 0 0
  • 2017年11月9日 星期四 阴 二年级五班代路瑶爸爸 亲子日记第三十九篇 今天给孩子定的新书《舒克和贝...
    人弋三寿阅读 221评论 0 0