究竟为啥总在凌晨上线,如何进行无损发布

开发 开发工具
为什么很多互联网公司升级系统,选择在晚上上线?美名其曰,晚上上线,对用户影响最小。

为什么很多互联网公司升级系统,选择在晚上上线?

美名其曰,晚上上线,对用户影响最小。

[[356497]]

为什么会对用户产生影响?

很多人认为,系统升级往往需要重启,重启的过程中,正在访问的用户会访问失败。

例如,如果升级的是web-server:

如上图,重启ip1上的tomcat时,tomcat上或许有1000个http请求正在处理,这些请求就会失败。

又例如,如果升级的是service:

如上图,重启ip1的service时,service上或许有2000个请求正在处理,这些请求就会失败。

web-server升级能否不影响正在处理的请求?

可以,需要nginx和web-server配合。

(1) 给nginx发指令,将ip1上的流量切走;

(2)nginx不会将新流量放给ip1,旧流量会很快处理完成;

(3)旧流量完成后,升级web-server;

此时,ip1上的web-server处于没有流量的状况,可以随便玩:

  • 停服务备份
  • 升级(粉色代表升级后的节点)
  • 服务重启
  • 测试工程师直连ip1进行验证
  • 验证完毕

(4) 给nginx发指令,将流量切回ip1;

(5) 流量切回ip1,单节点上线成功;

一个节点升级完成之后,其他节点可以依次逐台升级。

service升级能否不影响正在处理的请求?

可以,需要RPC-client和RPC-server配合。

(1)向准备升级的service节点ip1发送切流量指令;

这里和web-service不同:

  • web-service是向上游nginx发指令切流量;
  • service是通过下游server发指令切流量;

(2) RPC-server通过tcp长连接将切流量的指令通知RPC-client;

执行切流量指令的组件最终是RPC-client上的tcp连接池。

(3) RPC-client不再将新流量放给ip1,旧流量逐步处理完成;

为啥不能像web-server一样,直接给上游nginx发指令呢,因为service有太多的上游。

(4) 旧流量逐步迁移完成,RPC-client会间歇性重连;

此时,ip1上的service处于没有流量的状况,可以随便玩:

  • 停服务备份
  • 升级(粉色代表升级后的节点)
  • 服务重启

这个过程中,RPC-client会间歇性尝试重连(例如每分钟重试一次),直至ip1节点恢复;

(5)流量切回ip1,单节点上线成功;

一个节点升级完成之后,其他节点可以依次逐台升级。

是否还有其他注意事项?

  • 如果没有实现服务自动发现,服务治理,早期可以这么玩;
  • web-server无损升级,强烈建议脚本化;
  • service无损升级,需要服务框架支持;

【本文为51CTO专栏作者“58沈剑”原创稿件,转载请联系原作者】

戳这里,看该作者更多好文

 

责任编辑:赵宁宁 来源: 51CTO专栏
相关推荐

2018-11-07 06:35:50

互联网服务化高可用架构

2022-09-16 10:14:41

消息顺序性分布式架构

2018-08-16 09:00:44

2018-10-15 05:13:38

WiFi网速带宽

2009-08-20 08:46:01

Windows 7欧洲版售价

2016-12-05 11:48:27

IBM存储IBM存储

2013-03-14 09:59:26

超级计算机泰坦HPC

2021-04-14 10:31:43

运营商5G网络

2013-10-17 23:12:12

Windows 8.1Windows 8.1

2021-08-26 10:05:31

APP安全加密网络攻击

2010-06-03 11:01:32

Hadoop安装部署

2010-02-22 16:05:40

Python配置

2013-01-28 10:11:24

敏捷设计敏捷开发

2010-09-17 15:36:24

2017-07-28 11:31:59

iOS结构优化项目

2009-12-08 11:34:40

WCF Windows

2010-02-01 10:21:36

Python编码转换

2024-07-08 08:38:37

Python游戏开发

2017-12-28 11:25:51

2010-06-02 14:16:18

SVN版本控制
点赞
收藏

51CTO技术栈公众号