程序连接数据库响应慢!是Thread pool参数捣的鬼吗?

数据库 MySQL
在很长一段时间,都会出现程序连接数据库,出现响应慢的情况,正常在几到几十毫秒之间,但是偶尔会出现上百毫秒的情况;修改thread_cache_size参数后,重新测试程序连接数据库响应时间,速度极快,不再出现程序连接数据库响应慢的情况!

 程序连接数据库响应慢!是Thread pool参数捣的鬼吗?

数据库版本:percona-mysql 5.6.16

在很长一段时间,都会出现程序连接数据库,出现响应慢的情况,正常在几到几十毫秒之间,但是偶尔会出现上百毫秒的情况;

开始由于开发重新设置并调整过程序连接池,一直怀疑是连接池的问题,但是问题依旧;

[[214120]]

因为使用的版本是 percona-mysql 5.6.16 并且使用了数据库连接池。

Thread Pool 根据参数 thread_pool_size 被分为若干个 group, 每个 group 维护 client 发起的 connections, 当 MySQL 建立 connection 时, 

MySQL 根据 connection 的 thread id 对 thread_pool_size 取模, 将 connection 发起的 sql 语句分配到对应的 group。每个 group 的*** worker

数量为 thread_pool_oversubscribe+1。若 worker 达到***数量后还是不足以处理回话请求, 则连接在本 group 上等待, 导致 sql 语句的 rt 增大;

因此将 thread_pool_oversubscribe 参数调大,但是问题依旧;

[[214121]]

检查 thread_cache_size,服务器内存大小为 64G,thread_cache_size=128;

每建立一个连接,都需要一个线程来与之匹配,此参数用来缓存空闲的线程,以至不被销毁,如果线程缓存中有空闲线程,这时候如果建立新连接,MYSQL 就会很快的响应连接请求;

  1. show status like '%thread%'
  2.  
  3. Variable_name Value 
  4.  
  5. Threads_cached     0 
  6.  
  7. Threads_connected   219 
  8.  
  9. Threads_created     655068 
  10.  
  11. Threads_running     48 

使用 show status 查看当前 mysql 连接情况:

  1. SHOW STATUS WHERE Variable_name LIKE '%Thread%'

Threads_cached : 代表当前此时此刻线程缓存中有多少空闲线程。

Threads_connected : 代表当前已建立连接的数量,因为一个连接就需要一个线程,所以也可以看成当前被使用的线程数。

Threads_created : 代表从最近一次服务启动,已创建线程的数量。

Threads_running : 代表当前激活的(非睡眠状态)线程数。并不是代表正在使用的线程数,有时候连接已建立,但是连接处于 sleep 状态,这里相对应的线程也是 sleep 状态。

***将 thread_cache_size 设置成与 threads_connected 一样。

  1. show variables like '%thread%'
  2.  
  3. +-----------------------------------------+-----------------+ 
  4.  
  5. | Variable_name                           | Value           | 
  6.  
  7. +-----------------------------------------+-----------------+ 
  8.  
  9. | innodb_purge_threads                    | 1               | 
  10.  
  11. | innodb_read_io_threads                  | 4               | 
  12.  
  13. | innodb_thread_concurrency               | 0               | 
  14.  
  15. | innodb_thread_sleep_delay               | 10000           | 
  16.  
  17. | innodb_write_io_threads                 | 4               | 
  18.  
  19. | max_delayed_threads                     | 20              | 
  20.  
  21. | max_insert_delayed_threads              | 20              | 
  22.  
  23. | myisam_repair_threads                   | 1               | 
  24.  
  25. | performance_schema_max_thread_classes   | 50              | 
  26.  
  27. | performance_schema_max_thread_instances | -1              | 
  28.  
  29. | pseudo_thread_id                        | 8735851         | 
  30.  
  31. | thread_cache_size                       | 128             | 
  32.  
  33. | thread_concurrency                      | 24              | 
  34.  
  35. | thread_handling                         | pool-of-threads | 
  36.  
  37. | thread_pool_high_prio_mode              | transactions    | 
  38.  
  39. | thread_pool_high_prio_tickets           | 4294967295      | 
  40.  
  41. | thread_pool_idle_timeout                | 60              | 
  42.  
  43. | thread_pool_max_threads                 | 100000          | 
  44.  
  45. | thread_pool_oversubscribe               | 40              | 
  46.  
  47. | thread_pool_size                        | 12              | 
  48.  
  49. | thread_pool_stall_limit                 | 500             | 
  50.  
  51. | thread_stack                            | 262144          | 
  52.  
  53. | thread_statistics                       | OFF             | 
  54.  
  55. +-----------------------------------------+-----------------+ 

可以不断刷新,如果 Threads_cached = 0 且 Threads_created 不断增大,那么当前 thread_cache_size 的值设置要改大,改到 Threads_connected 值左右,

再结合物理内存 1G  —> 8;2G  —> 16; 3G  —> 32; >3G  —> 64 二个情况综合考虑一下值, 将 thread_cache_size 改为 512;

注译:

Threads_cached : 代表当前此时此刻线程缓存中有多少空闲线程。

Threads_connected : 代表当前已建立连接的数量,因为一个连接就需要一个线程,所以也可以看成当前被使用的线程数。

Threads_created : 代表从最近一次服务启动,已创建线程的数量。

Threads_running : 代表当前激活的(非睡眠状态)线程数。并不是代表正在使用的线程数,有时候连接已建立,但是连接处于 sleep 状态,这里相对应的线程也是 sleep 状态。

 

修改 thread_cache_size 为 512 后,重新测试程序连接数据库响应时间,速度极快,不再出现程序连接数据库响应慢的情况! 

责任编辑:庞桂玉 来源: ITPUB
相关推荐

2023-08-29 07:35:15

2010-10-12 12:00:42

MySQL连接

2009-07-06 17:23:34

JDBC连接数据库

2011-03-16 17:14:17

JavaBean数据库

2009-07-17 15:34:37

Java Swing连接数据库

2009-03-19 10:08:09

C#数据库查询

2010-08-04 10:32:56

Flex连接数据库

2009-07-20 15:56:08

JDBC连接数据库步骤

2009-07-14 17:18:23

JDBC怎么连接数据库

2009-08-25 14:05:06

C#连接数据库代码

2011-07-05 09:54:04

2009-07-16 11:04:17

Jython连接数据库

2019-03-27 14:41:41

Python数据库Windows

2009-08-18 11:23:11

2011-12-05 10:43:54

JavaJDBC数据库

2010-05-25 18:21:28

MySQL连接数据库

2011-04-18 09:29:40

数据库连接数

2009-12-23 09:40:53

ADO对象模型

2009-08-05 15:40:49

ASP.NET连接数据

2009-07-20 14:30:38

jdbc连接数据库代码
点赞
收藏

51CTO技术栈公众号