当前位置:首页 > 芯闻号 > 充电吧
[导读]摘要 最近工作上,需要研究一下mysql的优化,其中接触了一个mysql的参数thread_concurrency,需要调查一下thread_concurrency的理论知识,研究一下thread_c

摘要 最近工作上,需要研究一下mysql的优化,其中接触了一个mysql的参数thread_concurrency,需要调查一下thread_concurrency的理论知识,研究一下thread_concurrency是否有助于提升mysql的性能,通过百度和google的帮助以及阅读官方doc,对mysql thread_concurrency以及innodb_thread_concurrency有了一定的了解,这里简单的对其中涉及的知识做一些整理。

    原文地址:关于Mysql thread_concurrency和innodb_thread_concurrency参数的一点整理

    首先,最重要的一点,这个参数已经在最新版本的mysql中被移除了,官方最新5.7版本的doc上面对thread_concurrency有这样的说明:

    thread_concurrency变量是针对于Solaris 8及低版本的系统,设置了这个变量mysqld会调用thr_setconcurrency()函数。这个函数允许应用程序给同一时间运行的线程系统提示所需数量的线程。当前的Solaris 版本中这个参数已经没有作用了。这个参数在mysql 5.6.1中已经被标记为过时,在5.7.2版本的mysql中被移除。       

    对于thread_concurrency参数,这里有两篇文章可以参考:    

     thread_concurrency doesn’t do what you expect    

     mysql中优化thread_concurrency的误区      

     在 Mysql中事务隔离级别与binlog_format的一点理解中,我们简单的介绍过mysql的两种存储引擎:MyISAM和InnoDB,InnoDB支持事务,也是日常开发中常用的存储引擎,在InnoDB中,我们可以通过设置参数innodb_thread_concurrency限制线程的数量。        

    先来看一下官方doc 14.13.5 Configuring Thread Concurrency for InnoDB对innodb_thread_concurrency参数的配置说明,翻译如下:       

    InnoDB使用操作系统线程来处理用户的事务请求。(在事务提交或回滚之前可能给InnoDB引擎带来很多的请求)。在现代化操作系统和多核处理器的服务器,上下文切换是有效的,大多数工作负载运行没有任何并发线程数量的限制。在MySQL 5.5及以上版本中,MySQL做了可伸缩性的改进,它减少了这种在InnoDB内部限制并发执行线程数量的需要。       

    它有助于在最小化的情况下进行线程之间的上下文切换,InnoDB可以使用各种技术来限制操作系统并发执行线程的数量(因此大批量的请求可以在任何一个时间得到处理)。当InnoDB从用户会话收到一个新的请求,如果线程并发执行的数量达到预定义的限制,那么新的请求会先睡眠一段时间后再次尝试。在睡眠后不能按计划执行的请求会被放入先入/先出队列,并最终处理。那些等待获取锁的线程则不会被计入到并发执行线程的数量中。       我们可以通过设置配置参数innodb_thread_concurrency来限制并发线程的数量,一旦执行线程的数量达到这个限制,额外的线程在被放置到对队列中之前,会睡眠数微秒,可以通过设定参数innodb_thread_sleep_delay来配置睡眠时间。        

    在5.6.3之前的版本中,Mysql要求通过测试和实验找到innodb_thread_sleep_delay的最优值,这个最优值可能会因工作负载情况不同而发生改变。在MySQL 5.6.3及更高版本中,你可以通过设置参数innodb_adaptive_max_sleep_delay为innodb_thread_sleep_delay设置最大允许的值,InnoDB会根据当前线程调度活动自动调整innodb_thread_sleep_delay的值,这种动态调整机制有助于工作的线程,在系统负载低时或系统接近满负荷运转时,都能够顺利的调度。       

    在MySQL 和 InnoDB之前的版本系列中,innodb_thread_concurrency的默认值,以及其隐含的限制并发线程执行的数量都进行过调整。在当前最新版本的mysql中,innodb_thread_concurrency的默认值为0,它表示默认情况下不限制线程并发执行的数量。       

    需要注意的是,InnoDB导致线程睡眠当且仅当并发线程的数量是有限的时候。如果对线程并发执行的数量没有限制,所有的请求都会被认为是可调度的,也就是说,如果innodb_thread_concurrency的值设置为0,innodb_thread_sleep_delay的值将会被忽略。       

    当有对线程数量进行限制(即innodb_thread_concurrency参数> 0),InnoDB通过允许多个请求在一个SQL语句执行过程中进入InnoDB,而不必遵守innodb_thread_concurrency设置的参数限额,来减少上下文的切换开销,当一个SQL语句(如join语句)包含在InnoDB的多行操作时,InnoDB会分配 指定数量的“入场券”,允许一个线程反复使用最小的开销。       

    当一个新的SQL语句开始,当前线程没有“入场券”,它就必须遵守innodb_thread_concurrency参数设置,一旦这个线程有权进入InnoDB,它会被分配一个“入场券”,它可以通过这个“入场券”用于随后进入InnoDB执行行操作,如果“入场券”使用完毕,该线程将会被驱逐,innodb_thread_concurrency参数会被放回到先入/先出队列中等待的线程等待再次观察。一旦这个线程再次有权进入InnoDB,“入场券”又会被重新分配,我们可以通过设置全局参数innodb_concurrency_tickets来指定“入场券”的数量,默认情况下是5000。正在等待获取锁的线程,一旦锁可用,会被立即分配一个“入场券”。      

     这些参数的正确值取决于当前系统环境和负载情况。尝试各种不同的值,以确定哪些值适用于当前应用程序。在限制并发执行的线程数之前,在多核及多处理器的计算机上,检查一下InnoDB的配置参数是否可以改善性能,比如innodb_adaptive_hash_index。       

    对于innodb_thread_concurrency参数的作用及配置,这里有两篇文章可以参考:

       innodb_thread_concurrency的作用与改良   

      innoDb 的多线程并发调优       

    在官方doc上,对于innodb_thread_concurrency的使用,也给出了一些建议,如下:

如果一个工作负载中,并发用户线程的数量小于64,建议设置innodb_thread_concurrency=0;

如果工作负载一直较为严重甚至偶尔达到顶峰,建议先设置innodb_thread_concurrency=128,并通过不断的降低这个参数,96, 80, 64等等,直到发现能够提供最佳性能的线程数,例如,假设系统通常有40到50个用户,但定期的数量增加至60,70,甚至200。你会发现,性能在80个并发用户设置时表现稳定,如果高于这个数,性能反而下降。在这种情况下,建议设置innodb_thread_concurrency参数为80,以避免影响性能。

如果你不希望InnoDB使用的虚拟CPU数量比用户线程使用的虚拟CPU更多(比如20个虚拟CPU),建议通过设置innodb_thread_concurrency 参数为这个值(也可能更低,这取决于性能体现),如果你的目标是将MySQL与其他应用隔离,你可以考虑绑定mysqld进程到专有的虚拟CPU。但是需 要注意的是,这种绑定,在myslqd进程一直不是很忙的情况下,可能会导致非最优的硬件使用率。在这种情况下,你可能会设置mysqld进程绑定的虚拟 CPU,允许其他应用程序使用虚拟CPU的一部分或全部。

在某些情况下,最佳的innodb_thread_concurrency参数设置可以比虚拟CPU的数量小。

定期检测和分析系统,负载量、用户数或者工作环境的改变可能都需要对innodb_thread_concurrency参数的设置进行调整。



本站声明: 本文章由作者或相关机构授权发布,目的在于传递更多信息,并不代表本站赞同其观点,本站亦不保证或承诺内容真实性等。需要转载请联系该专栏作者,如若文章内容侵犯您的权益,请及时联系本站删除( 邮箱:macysun@21ic.com )。
换一批
延伸阅读

针对ABB工业机器人码垛作业中传统程序存在的示教烦琐、通用性差等问题 ,提出了结合F0R循环指令 、数组及0ffs功能的程序优化方案 。优化后的程序仅需示教一个货物的点位 ,其他货物的点位则通过0ffs偏置指令、F0R循...

关键字: 工业机器人 码垛 优化 标准化

蒸汽发生器密封堵板拆装作业是核电厂全面解体大修中的重要工作 , 密封堵板的运行可靠性和集体剂量控制是其改进优化的主要目标。当前 ,核电厂针对蒸汽发生器密封堵板均进行了一定的改进优化 ,提高了密封堵板的操作便捷性 ,增加了...

关键字: 核电站 蒸汽发生器 密封堵板 优化 辐射防护

为了评估某皮卡车架拖挂系统的疲劳强度性能 , 首先基于Hypermesh软件创建其有限元网格模型 , 然后根据强度工况加载相应的载荷 , 采用Abaqus软件求解得到车架的塑性应变最大为69. 3% , 超过了其材料断后...

关键字: 车架 拖挂 疲劳 强度 优化

为提高梗丝气流干燥出口水分的稳定性 ,针对实际生产中存在的料头流量超限 、回风负压波动及混合风温调节滞 后等问题 , 通过开发电子皮带秤预填充功能 、改进回风负压的控制方式以及设计混合风温分阶段控制策略 , 实现了物料流...

关键字: 梗丝 气流干燥 水分稳定性 优化

关于gorm框架的简单运用

关键字: gorm mysql

武钢有限硅钢部某制氢站UPS系统存在设备老化、输出容量不足、无备用回路等问题 , 需要进行改造。改造方案包括更换原有UPS和蓄电池组 ,并增加一套UPS , 以及优化交流输出回路 ,增加联络开关 。 改造后 ,UPS系统...

关键字: UPS 制氢站 改造 优化

粉煤灰作为燃煤电厂的副产品 ,是煤炭燃烧后剩余的细微颗粒 ,其密度是衡量其质量的关键指标之一。在工业应用中 ,粉煤灰因其独特的物理和化学性质 ,被广泛应用于混凝土生产、道路建设、土壤改良等多个领域。根据相关研究 ,粉煤灰...

关键字: 粉煤灰 密度检测 优化 无水乙醇

某一新车尾门悬挂重达35 kg备胎 , 需满足下垂性能指标及轻量化需求 ,针对传统人工迭代优化周期长 、难度大的 问题 ,提出一种基于径向基神经网络(RBF)的尾门优化方法 , 首先将尾门结构参数和料厚定义为可优化设计...

关键字: 尾门 优化 径向基神经网络 试验设计 遗传算法

某公司3 500 mm中厚板生产线全年轧制的钢板37%以上为控温钢板 ,传统控温方式为轧制到控温道次进入控温区 域空冷等待 , 中间坯平均控温时间较长 ,严重制约了产量提升。故基于主轧机前后两台中间水冷设备 ,研究分...

关键字: 中厚板 控温时间 中间坯 中间水冷 优化

摘要:大型火力发电厂一次调频性能的优良对维持电网稳定运行具有关键作用。目前,大型火力发电厂一次调频采用的是频率差函数发生器开环控制策略,这种控制策略方式构造简单、反应速度快,但是无法准确控制系统的输出量,不能达到期望值。...

关键字: 一次调频 闭环控制 优化
关闭