浅谈MySQL Buffer学习及思考

    本博文旨在结合自己看书理解，并借此图进行说明，如有谬误，望大家指正，以共同探讨为目的，交流学习。

首先介绍一下此图的由来:最近看关于mysql方面书籍的一点心得，把文字转化成图片而得，方便理解。

 

然后对以上参数进行一下简单的介绍：

 

1、max_connections这个参数，这个参数指MySql的最大连接数，如果服务器的并发连接请求量比较大，建议调高此值，以增加并行连接数量，服务器根据自己的实际情况进行增加，如果连接数越多，因MySql会为每个连接提供连接缓冲区，就会开销越多的内存，所以要适当调整该值，不能盲目提高设值。可以过mysql -e "SHOW VARIABLES LIKE 'max_connections';"查看当前状态的连接数量来设定该值大小。当你常看到Too many connections 错误，可以增加此值了，默认是100。 

 

2、back_log这个参数主要是基于max_connections进行的一个额外连接，也就是说当mysql连接大于max_connections设置的值的话，而又在（max_connections+back_log）之间，则mysql会把新连接放到堆栈中，等待之前连接的process释放，如果当前最大请求超过了（max_connections+back_log），就不会授权连接，当然该值也受约于系统的TCP/IP连接的侦听队列（系统的tcp_max_syn_backlog值的大小），可以通过cat /proc/sys/net/ipv4/tcp_max_syn_backlog查看，当然可以修改该值 

sysctl -w net.ipv4.tcp_max_syn_backlog=N或在/etc/sysctl.conf中添加tcp_max_syn_backlog=N即可。 

 

 

    由于mysql被称为内存式数据库，当然很内存是密不可分了，而他和内存的关系主要是通过缓冲区大小的几个参数吧。

 

缓冲包括：全局缓冲和局部缓冲。

 

全局缓冲参数大致有如下：

key_buffer_size, innodb_buffer_pool_size, innodb_additional_mem_pool_size，innodb_log_buffer_size, query_cache_size 

而局部缓冲（我自己习惯这么叫，虽然不专业，呵呵）一般mysql还会为每个连接分配连接缓冲。

全局缓冲在上篇博客中有介绍，这地方就省略了。

 

局部缓存：

    每个连接到MySQL服务器的线程都需要有自己的缓冲。大概需要立刻分配256K，甚至在线程空闲时，它们使用默认的线程堆栈，网络缓存等。事务开始之后，则需要增加更多的空间。运行较小的查询可能仅给指定的线程增加少量的内存消耗，然而如果对数据表做复杂的操作例如扫描、排序或者需要临时表，则需分配大约read_buffer_size，sort_buffer_size，read_rnd_buffer_size，tmp_table_size大小的内存空间。不过它们只是在需要的时候才分配，并且在那些操作做完之后就释放了。有的是立刻分配成单独的组块。tmp_table_size可能高达MySQL所能分配给这个操作的最大内存空间了。注意，这里需要考虑的不只有一点——可能会分配多个同一种类型的缓存，例如用来处理子查询。一些特殊的查询的内存使用量可能更大——如果在MyISAM表上做成批的插入时需要分配bulk_insert_buffer_size 大小的内存；执行 ALTER TABLE， OPTIMIZE TABLE， REPAIR TABLE命令时需要分配myisam_sort_buffer_size大小的内存。 

 

 

read_buffer_size是MySql读入缓冲区大小。对表进行顺序扫描的请求将分配一个读入缓冲区，MySql会为它分配一段内存缓冲区。read_buffer_size变量控制这一缓冲区的大小。如果对表的顺序扫描请求非常频繁，并且你认为频繁扫描进行得太慢，可以通过增加该变量值以及内存缓冲区大小提高其性能。  

 

sort_buffer_size是MySql执行排序使用的缓冲大小。如果想要增加ORDER BY的速度，首先看是否可以让MySQL使用索引而不是额外的排序阶段。如果不能，可以尝试增加sort_buffer_size变量的大小。  

 

read_rnd_buffer_size是MySql的随机读缓冲区大小。当按任意顺序读取行时(例如，按照排序顺序)，将分配一个随机读缓存区。进行排序查询时，MySql会首先扫描一遍该缓冲，以避免磁盘搜索，提高查询速度，如果需要排序大量数据，可适当调高该值。但MySql会为每个客户连接发放该缓冲空间，所以应尽量适当设置该值，以避免内存开销过大。  

 

tmp_table_size是MySql的heap（堆积）表缓冲大小。所有联合在一个DML指令内完成，并且大多数联合甚至可以不用临时表即可以完成。大多数临时表是基于内存的(HEAP)表。具有大的记录长度的临时表(所有列的长度的和)或包含BLOB列的表存储在硬盘上。如果某个内部heap（堆积）表大小超过tmp_table_size，MySQL可以根据需要自动将内存中的heap表改为基于硬盘的MyISAM表。还可以通过设置tmp_table_size选项来增加临时表的大小。也就是说，如果调高该值，MySql同时将增加heap表的大小，可达到提高联接查询速度的效果。 

 

  以上是结合自己常用的参数并查询mysql手册总结的。方便更直观的学习和理解。均个人见解，如有疑问，可共同交流学习！

 

 

©著作权归作者所有：来自51CTO博客作者Ro_410的原创作品，如需转载，请注明出处，否则将追究法律责任

mysql优化mysql学习mysql bufferMySQL DBA