10w 级的并发场景,JVM 有哪些方面值得优化呢?

开发 前端
今天我们来简单聊一聊面试中常见的一个问题:要支持 10w 级以上的并发场景, JVM 有哪些方面值得优化呢?

背景

以秒杀为例,大型电商系统会拆分多个微服务,比如订单服务,商品服务,优惠服务,库存服务,支付服务等等。

我们以下单为例,如下是简约版下单流程

一般我们需要结合业务和已有的资源,再去评估 JVM 的 GC 频率来作为参考:

  1. 首先结合业务流程分析,计算我们服务系统每秒产生的对象占用内存大小。
  2. 假设我们采用服务器规模 8C*16G,估算下新生代的空间,大概多久触发 MinorGC。
  3. 为了避免频繁的 Full GC,我们可以重新估算具体需要的机器配置和数量,给 JVM 设置多大内存。

我们先来分析下在 10W TPS 下单场景中,我们每秒产生的对象占用内存大小。

如何选择垃圾回收器?

在选择垃圾回收器的时候,我们需要考虑两个指标:

  • 吞吐量:CPU 在用户应用程序运行的时间/(CPU 在用户应用程序运行的时间+CPU 垃圾回收器运行的时间)。
  • 响应时间:平均每次 GC 的耗时。

目前主流的垃圾回收器配置是新生代采用 ParNew,老年代采用 CMS 组合的方式,虽然在 JDK8 以后更加推荐使用 G1。一般来说,对于延迟敏感的推荐 CMS;在大内存、要求高吞吐推荐 G1。

在电商下单场景中,用户对于些许的延迟可能会比较敏感,所以以下还是以 CMS 使用为例。

然后,我要如何设置 JVM 参数呢?

堆内存大小设置

对于 8G 内存,我们一般设置内存一半给 JVM,正常的 JVM 参数设置如下

-Xms8192M -Xmx8192M Xmn2048M -Xss1M -XX:MMetaspaceSize=256M -XX:MaxMetaspaceSize=256M -XX:SurvivorRatio=8

这样设置,而在下单场景,大多对象都是短期存活的,这样设置因为动态对象年龄判断原则导致频繁出发 Full GC。
所以可以调整新生代内存大小

-Xms8192M -Xmx8192M -Xmn4086M -Xss1M -XX:MMetaspaceSize=256M -XX:MaxMetaspaceSize=256M -XX:SurvivorRatio=8

这样就降低了对象频繁进入老年代的问题,实际上很多优化都是围绕着如何减少 Full GC 去做的,就是尽可能把短期存活的对象留在 survivor 里,不要进入老年代,这样就可以在 Minor GC 的时候回收掉这些对象,不会产生 Full GC,从而引发 STW,影响系统性能。

除了新生代大小外,还有什么可以优化呢?

常见 JVM 参数优化

  1. 新生代动态对象年龄:默认设置为 15。本例子中每次 Minor GC 间隔 20s 左右,而在下单场景中,一般对象几秒内就会变成垃圾对象了,像这么长时间都还没被回收的话,其实可以早点放到老年代,这样也不会占用新生代的内存了,比如通过设置参数-XX:MaxTenuringThreshold=5,那么经历过 5 次 Minor GC 后就会进入老年代。
  2. 针对大对象,有时我们会在本地缓存一些不常变化的配置,可结合实际业务评估这些对象大小比如会超过 2M,而且会一直存活保留,那么针对这些对象其实可以直接进入老年代,可以通过设置参数-XX:PretenureSizeThreshold=2M。
  3. 针对 CMS 的碎片整理,因为 CMS 基于标记-清除算法实现,会产生内存碎片,如果这些内存碎片长时间不清理的话,那么老年代的内存可用空间会降低,所以 CMS 也提供了两个参数用于内存碎片的整理:
  • -XX:+UseCMSCompactAtFullCollection,开启内存碎片整理。
  • -XX:CMSFullGCsBeforeCompaction,执行指定次数的 Full GC 后,进行一次内存整理压缩整理的 Full GC。
  1. 元空间大小,Meta 区域的大小一定要指定,如果我们代码类或引入动态生成类的技术超过元空间大小,那么会触发 Full GC,可以通过 jstat 命令查看项目生成类的大小来评估具体设置值,一般设置 256M 够了。
  2. JIT 即时编译,-XX:ReservedCodeCacheSize。JIT 是 JVM 一个非常重要的特性,CodeCahce 存放的就是即时编译器所生成的二进制代码。
  3. JVM 逃逸分析,逃逸分析也是一种优化手段,JVM 如果分析确定一个对象不会逃逸于方法之外,那么这个对象会被分配在栈上,而不是在堆上,这样一定程度上就可以减轻 GC 压力。
责任编辑:姜华 来源: 码哥跳动
相关推荐

2024-08-06 08:13:26

2024-06-26 08:32:13

2011-06-28 15:06:09

ASP.NET网站优化

2011-06-15 13:17:36

ASP.NET

2015-07-29 16:11:51

2020-11-03 07:00:15

性能优化程序员

2022-11-30 08:17:41

JVM调优技巧

2021-01-11 07:40:30

中断程序中断函数嵌入式系统

2010-08-11 11:12:46

IT公司面试问题

2020-11-26 15:30:05

VueReac前端

2020-01-15 15:45:23

网络安全网络安全趋势派拓网络

2017-03-13 09:12:00

TCP数据结构请求包

2018-12-10 18:00:34

2021-09-09 11:35:10

云计算医疗云计算市场

2024-03-07 17:21:12

HotSpotJVMHot Code

2021-06-30 17:21:23

CPUMySQL性能

2013-10-16 09:42:53

虚拟桌面

2009-10-27 20:53:15

企业网络架构网络规划

2015-05-28 11:41:17

综合布线系统

2013-10-21 10:51:01

认证管理VDI部署
点赞
收藏

51CTO技术栈公众号