Numa对MySQL多实例性能测试报告

迷南。 2022-08-27 14:38 322阅读 0赞

本文转载自：http://blog.chinaunix.net/uid-26896862-id-3278913.html

[Numa对MySQL多实例性能测试报告][Numa_MySQL] *2012-07-18 16:29:28*

分类： Mysql/postgreSQL

**目的**

由于MySQL采用了线程模式，对于NUMA特性的支持并不好。如果单机运行多个MySQL实例，可以将MySQL绑定在不同的CPU节点上，并且采用绑定的内存分配策略，强制在本节点内分配内存，这样既可以充分利用硬件的NUMA特性，又避免了单实例MySQL对多核CPU利用率不高的问题。

**测试环境：**

测试系统环境如下所示：

<table> 
 <tbody> 
  <tr> 
   <td> <p>Summary:</p> </td> 
   <td> <p>Dell R610, 1 x Xeon E5645 2.40GHz, 47.2GB / 48GB 1333MHz DDR3</p> </td> 
  </tr> 
  <tr> 
   <td> <p>System:</p> </td> 
   <td> <p>Dell PowerEdge R610 (Dell 08GXHX)</p> </td> 
  </tr> 
  <tr> 
   <td> <p>Processors:</p> </td> 
   <td> <p>1 (of 2) x Xeon E5645 2.40GHz 5860MHz FSB (HT enabled, 6 cores, 24 threads)</p> </td> 
  </tr> 
  <tr> 
   <td> <p>Memory:</p> </td> 
   <td> <p>47.2GB / 48GB 1333MHz DDR3 == 6 x 8GB, 6 x empty</p> </td> 
  </tr> 
  <tr> 
   <td> <p>Disk:</p> </td> 
   <td> <p>sda (scsi0): 1.2TB (17%) JBOD == 1 x DELL-PERC-H700</p> </td> 
  </tr> 
  <tr> 
   <td> <p>Disk-Control:</p> </td> 
   <td> <p>megaraid_sas0: LSI Logic / Symbios Logic MegaRAID SAS 2108 [Liberator], Package 12.10.4-0001, FW 2.100.03-1584, BIOS 3.18.00_4.09.05.00_0x0416A000, Cache 1GB, BBU</p> </td> 
  </tr> 
  <tr> 
   <td> <p>Chipset:</p> </td> 
   <td> <p>Intel 82801IB (ICH9)</p> </td> 
  </tr> 
  <tr> 
   <td> <p>Network:</p> </td> 
   <td> <p>em1 (bnx2): Broadcom NetXtreme II BCM5709 Gigabit, d4:be:d9:f5:62:50, 1000Mb/s &lt;full-duplex&gt;</p> </td> 
  </tr> 
  <tr> 
   <td> <p>OS:</p> </td> 
   <td> <p>CentOS 6.2 (Final), Linux 2.6.32-220.23.1.el6.x86_64 x86_64, 64-bit</p> </td> 
  </tr> 
 </tbody> 
</table>

此外，Virident FlashMAX官方提供的参数如下所示：

<table> 
 <tbody> 
  <tr> 
   <td> <p><span style="font-size:11pt"><strong>Capacity (GB) </strong></span></p> </td> 
   <td> <p><span style="font-size:11pt">1000 </span></p> </td> 
  </tr> 
  <tr> 
   <td> <p><span style="font-size:11pt"><strong>NAND Flash </strong></span></p> </td> 
   <td> <p><span style="font-size:11pt">MLC </span></p> </td> 
  </tr> 
  <tr> 
   <td> <p><span style="font-size:11pt"><strong>Form Factor </strong></span></p> </td> 
   <td> <p><span style="font-size:11pt">Low Profile (half height, half length) </span></p> </td> 
  </tr> 
  <tr> 
   <td> <p><span style="font-size:11pt"><strong>Read Performance </strong></span></p> </td> 
   <td> <p><span style="font-size:11pt">1.3 GB/s (4KB blocks) </span></p> <p><span style="font-size:11pt">325,000 IOPS (4KB blocks) </span></p> <p><span style="font-size:11pt">1,000,000 IOPs (0.5KB blocks) </span> </p> </td> 
  </tr> 
  <tr> 
   <td> <p><span style="font-size:11pt"><strong>Sustained Mixed Performance (75:25 r/w) </strong></span></p> </td> 
   <td> <p><span style="font-size:11pt">850 MB/s (4 KB blocks) </span></p> <p><span style="font-size:11pt">280,000 IOPS (4KB blocks) </span></p> </td> 
  </tr> 
  <tr> 
   <td> <p><span style="font-size:11pt"><strong>Access Latency </strong></span></p> </td> 
   <td> <p><span style="font-size:11pt">19us </span></p> </td> 
  </tr> 
  <tr> 
   <td> <p><span style="font-size:11pt"><strong>Lifetime (PB written to flash) </strong></span></p> </td> 
   <td> <p><span style="font-size:11pt">10, 15 </span></p> </td> 
  </tr> 
 </tbody> 
</table>

以上测试系统可知，物理机器配置为两个物理CPU，每个CPU上有6核心，开启超线程状态下，显示为24 CPU。SSD的读写性能可以参照：《Virident FlashMAX测试》。

**测试工具及条件**

测试工具为percona提供的TPCC-MySQL基准测试工具，测试环境如下所示，数据大小大约为30G。并且所有实例的测试条件相同。

<table> 
 <tbody> 
  <tr> 
   <td> <p>&nbsp;[warehouse]: 300</p> <p>&nbsp;[connection]: 32</p> <p>&nbsp;[rampup]: 1200 (sec.)</p> <p>&nbsp;[measure]: 1800 (sec.)</p> </td> 
  </tr> 
 </tbody> 
</table>

**测试方案**

测试numa对MySQL多实例性能影响，通过对numa将MySQL绑定在不同的CPU节点上，并且采用绑定的内存分配策略，强制在本节点内分配内存。具体测试如下：

1、关闭numa（numa= interleave），MySQL单实例；开启numa（numa=default），MySQL单实例，进行性能测试，比较测试结果。

2、numa隔离MySQL两个实例，instance1绑定到0，instance2绑定到1；无numa隔离的MySQL两个实例，进行性能测试，比较测试结果。

3、numa隔离MySQL四个实例，instance1、instance3绑定到0，instance2、instance4绑定到1；以及无numa隔离的MySQL四个实例，进行性能测试，比较测试结果。

**测试结果**

1、MySQL单实例

关闭numa（numa = interleave），与开启numa（numa = default）的MySQL性能测试结果如下所示：

<table> 
 <tbody> 
  <tr> 
   <td> <p><strong><span style="font-family:宋体">测试</span></strong></p> </td> 
   <td> <p><strong><span>TpmC</span></strong></p> </td> 
  </tr> 
  <tr> 
   <td style="background:rgb(211,223,238)"> <p><strong><span style="font-family:宋体">关闭</span><span>numa</span><span style="font-family:宋体">（</span><span>numa = interleave</span><span style="font-family:宋体">）</span></strong></p> </td> 
   <td style="background:rgb(211,223,238)"> <p>20570.699 TpmC</p> </td> 
  </tr> 
  <tr> 
   <td> <p><strong><span style="font-family:宋体">开启</span><span>numa</span><span style="font-family:宋体">（</span><span>numa = </span><span>default</span><span style="font-family:宋体">）</span></strong></p> </td> 
   <td> <p>20341.533 TpmC</p> </td> 
  </tr> 
 </tbody> 
</table>

2、MySQL两个实例

numa隔离MySQL两个实例，instance1绑定到0，instance2绑定到1，与无numa隔离的MySQL两个实例的性能测试结果如下所示：

<table> 
 <tbody> 
  <tr> 
   <td> <p><strong><span style="font-family:宋体">测试</span></strong></p> </td> 
   <td> <p><strong><span>instance1</span></strong></p> </td> 
   <td> <p><strong><span>instance2</span></strong></p> </td> 
  </tr> 
  <tr> 
   <td style="background:rgb(211,223,238)"> <p><strong><span>numa</span><span style="font-family:宋体">隔离</span></strong></p> </td> 
   <td style="background:rgb(211,223,238)"> <p>16307.533 TpmC</p> </td> 
   <td style="background:rgb(211,223,238)"> <p>14678.600 TpmC</p> </td> 
  </tr> 
  <tr> 
   <td> <p><strong><span style="font-family:宋体">无</span><span>numa</span><span style="font-family:宋体">隔离</span></strong></p> </td> 
   <td> <p>15059.134 TpmC</p> </td> 
   <td> <p>15089.167 TpmC</p> </td> 
  </tr> 
 </tbody> 
</table>

3、MySQL四个实例

numa隔离MySQL四个实例，instance1、instance3绑定到0，instance2、instance4绑定到1，与无numa隔离的MySQL四个实例的性能测试结果如下所示：

<table> 
 <tbody> 
  <tr> 
   <td> <p><strong><span style="font-family:宋体">测试</span></strong></p> </td> 
   <td> <p><strong><span>instance1</span></strong></p> </td> 
   <td> <p><strong><span>instance2</span></strong></p> </td> 
   <td> <p><strong><span>instance3</span></strong></p> </td> 
   <td> <p><strong><span>instance4</span></strong></p> </td> 
  </tr> 
  <tr> 
   <td style="background:rgb(211,223,238)"> <p><strong><span>numa</span><span style="font-family:宋体">隔离</span></strong></p> </td> 
   <td style="background:rgb(211,223,238)"> <p>10623.866 TpmC</p> </td> 
   <td style="background:rgb(211,223,238)"> <p>10325.767 TpmC</p> </td> 
   <td style="background:rgb(211,223,238)"> <p>10623.600 TpmC</p> </td> 
   <td style="background:rgb(211,223,238)"> <p>10287.800 TpmC</p> </td> 
  </tr> 
  <tr> 
   <td> <p><strong><span style="font-family:宋体">无</span><span>numa</span><span style="font-family:宋体">隔离</span></strong></p> </td> 
   <td> <p>10268.100 TpmC</p> </td> 
   <td> <p>10316.400 TpmC</p> </td> 
   <td> <p>10323.134 TpmC</p> </td> 
   <td> <p>10260.200 TpmC</p> </td> 
  </tr> 
 </tbody> 
</table>

对比图如下所示：

[![26896862_13426002124AnT.jpg][]][26896862_13426002124AnT.jpg]

**测试结论**

经过测试，从而验证了单机运行多个MySQL实例，将MySQL绑定在不同的CPU节点上，并且采用绑定的内存分配策略，强制在本节点内分配内存，这样既可以充分利用硬件的NUMA特性，又避免了单实例MySQL对多核CPU利用率不高的问题。

此外，从测试结果来看，在相同测试条件下和测试压力下，CPU：0上MySQL的性能明显优于CPU：1上MySQL的性能。至于原因，仍然需要进一步的测试。

**参考资料**

1、《MySQL单机多实例方案》http://www.hellodb.net/2011/06/mysql\_multi\_instance.html

注：近期参加MySQL运维学习，老师推荐该文章作为学习和技术提高的扩展阅读，先记录到自己的博客中，随后慢慢消化、学习、提高。本文与MySQL数据库 “性能优化”主题有关。

[Numa_MySQL]: http://blog.chinaunix.net/uid-26896862-id-3278913.html
[26896862_13426002124AnT.jpg]: http://blog.chinaunix.net/attachment/201207/18/26896862_13426002124AnT.jpg

发表评论取消回复

表情：

评论列表（有 0 条评论，322人围观）

还没有评论，来说两句吧...

相关阅读

相关 kudu性能测试报告

参考文章：[Kudu 原理、API使用、代码][Kudu _API] ![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_

Bertha 。/ 2023年03月12日 15:28/ 0 赞/ 288 阅读

相关性能测试报告,实例讲解

上一篇博文主要通过两个例子让测试新手了解一下测试思想，和在做测试之前应该了解人几点，那么我们在如何完成一次完整的性能测试呢？测试报告是一次完整性能测试的体现，所以，这里我给

淩亂°似流年/ 2022年12月08日 05:36/ 0 赞/ 295 阅读

相关性能测试报告模板

前言：性能测试报告模板概述性能测试报告模板 xxx项目性能测试报告模板 1、概况 1.1测试背景 1.2

拼搏现实的明天。/ 2022年09月13日 04:04/ 0 赞/ 404 阅读

相关软件测试性能实验报告,软件测试实验报告.doc

软件测试实验报告实验报告课程名称软件测试技术实验项目名称性能测试工具LoadRunner的使用班级与班级代码实验室名称(或课室) 专业软件工程

亦凉/ 2022年08月29日 12:54/ 0 赞/ 437 阅读

相关软件性能测试报告收费,软件性能测试报告模板

对于测试同学，编写软件测试报告是常有的事情~ 那么，软件性能测试报告模板一般需要包含哪些要点呢？ 1、测试环境机器配置包括机器数和具体的配置，例如：单台机器，配置为4核

布满荆棘的人生/ 2022年08月29日 12:54/ 0 赞/ 445 阅读

相关 Numa对MySQL多实例性能测试报告

本文转载自：http://blog.chinaunix.net/uid-26896862-id-3278913.html [Numa对MySQL多实例性能

迷南。/ 2022年08月27日 14:38/ 0 赞/ 323 阅读

相关 Firefly 性能测试报告

原文链接：[http://firefly2.9miao.com/?page\_id=129][http_firefly2.9miao.com_page_id_129] 主要考

偏执的太偏执、/ 2022年05月13日 03:08/ 0 赞/ 356 阅读

相关性能测试报告模板

xxxx项目性能测试报告模板 VERSION 1.0 目录 1..................................

傷城~/ 2022年01月16日 09:15/ 0 赞/ 629 阅读

相关 7-性能测试i报告

性能测试报告概述 1.测试报告是指把测试的过程和结果写成文档：对发现的问题和缺陷进行分析；为纠正软件的存在的质量问题提供依据；为软件验收和交付打下基础 2.性能测试报告

梦里梦外;/ 2021年12月22日 22:53/ 0 赞/ 366 阅读

相关 MySQL--NUMA与MySQL

============================================================= NUMA(Non-Uniform Memory A

妖狐艹你老母/ 2021年10月25日 14:16/ 0 赞/ 447 阅读