TCMalloc 对MYSQL 性能 优化的分析

TCMalloc 对MYSQL 性能 优化的分析

 

Author：Echo Chen（陈斌）

Email：[email protected]

Blog：Blog.csdn.net/chen19870707

Date：October 10th, 2014

 

       

      虽然经过研究发现TCMalloc不适合我们现有的游戏框架，但意外收获发现TCMalloc可以大幅度提高MYSQL 性能及内存占用，这里给出配置及测试的结果：

 

一、配置

    

      关于TCMalloc的安装，在《Google perftools 安装手记(TCMalloc)》 一文中已经详细给出，下面给出将TCMalloc配置到MYSQL的步骤：

 

1.修改MySQL启动脚本（依据MySQL安装位置）：

 

vi /usr/local/mysql/bin/mysqld_safe

在# executing mysqld_safe的下一行，添加：

export LD_PRELOAD=/usr/local/lib/libtcmalloc.so

保存退出，并重启MySQL

 

 

2.依据lsof验证命令查看TCMalloc是否起效：

 

# lsof |grep -i libtcmalloc.so

如果发现以下信息，说明tcmalloc已经起效：

mysqld  13961   mysql  mem    REG  253,0  1948990     196421/usr/local/lib/libtcmalloc.so.4.1.2

 

二、性能测试工具sysbench

   

sysbench是一个开源的、模块化的、跨平台的多线程性能测试工具，可以用来进行CPU、内存、磁盘I/O、线程、数据库的性能测试。目前支持的数据库有MySQL、Oracle和PostgreSQL。以下操作都将以支持MySQL数据库为例进行。sourceforge已挂，下载地址：http://download.csdn.net/detail/chen19870707/8060033，安装步骤如下：

 

tar zxf sysbench-0.4.10.tar.gz 
cd sysbench-0.4.10
./configure && make && make install 
strip /usr/local/bin/sysbench

 

选项说明参考：http://www.cnblogs.com/zhoujinyi/archive/2013/04/19/3029134.html

 

 

三、性能分析：

 

数据准备：

sysbench --test=oltp --mysql-table-engine=innodb --oltp-table-size=10000 --max-requests=10000 --num-threads=16 --mysql-host=127.0.0.1 --mysql-port=3306 --mysql-user=root --mysql-password=root --mysql-db=test --mysql-socket=/tmp/mysql.sock prepare

 

性能测试：

sysbench --test=oltp --mysql-table-engine=innodb --oltp-table-size=10000 --max-requests=10000 --num-threads=16 --mysql-host=127.0.0.1  --mysql-port=3306 --mysql-user=root --mysql-password=root --mysql-db=test --mysql-socket=/tmp/mysql.sock run >> report.txt

 

数据清理：

/usr/local/bin/sysbench --test=oltp --mysql-table-engine=innodb --oltp-table-size=10000 --max-requests=10000 --num-threads=16 --mysql-host=127.0.01  --mysql-port=3306 --mysql-user=root --mysql-password=root --mysql-db=test --mysql-socket=/tmp/mysql.sock cleanup

参数说明:

--oltp-table-size=N         测试表的记录数。默认是10000 --max-requests=N           limit for total number of requests [10000] #请求的最大数目。默认为10000，0代表不限制。
--max-requests=N           limit for total number of requests [10000] #请求的最大数目。默认为10000，0代表不限制。
--num-threads=N            number of threads to use [1] #创建测试线程的数目。默认为1.
--mysql-host=[LIST,...]       MySQL server host [localhost]
--mysql-port=N                MySQL server port [3306]
--mysql-password=STRING       MySQL password []
--mysql-db=STRING             MySQL database name [sbtest]
--mysql-socket=STRING         MySQL socket

 

测试结果:

未使用TCMalloc OLTP test statistics:     queries performed:         read:                            140112         write:                           50019         other:                           20008         total:                           210139     transactions:                        10000  (756.11 per sec.)     deadlocks:                           8      (0.60 per sec.)     read/write requests:                 190131 (14376.02 per sec.)     other operations:                    20008  (1512.83 per sec.) Test execution summary:     total time:                          13.2256s     total number of events:              10000     total time taken by event execution: 211.4342     per-request statistics:          min:                                  2.96ms          avg:                                 21.14ms          max:                                423.52ms          approx.  95 percentile:     56.25ms

使用TCMalloc OLTP test statistics:     queries performed:         read:                            140084         write:                           50017         other:                           20006         total:                           210107     transactions:                        10000  (862.83 per sec.)     deadlocks:                           6      (0.52 per sec.)     read/write requests:                 190101 (16402.39 per sec.)     other operations:                    20006  (1726.17 per sec.) Test execution summary:     total time:                          11.5898s     total number of events:              10000     total time taken by event execution: 185.2397     per-request statistics:          min:                                  2.81ms          avg:                                 18.52ms          max:                                430.03ms          approx.  95 percentile:              36.49ms

      可以看到使用TCMalloc性能明显优于未使用,这里主要原因是mysql是多线程小内存分配,TCMalloc由于每个线程均有线程缓冲区,所以对这样的小对象分配无竞争,效率非常好，可以看到TCMalloc对MYSQL优化效果不错 ，建议使用。

 

-

Echo Chen：Blog.csdn.net/chen19870707

-