MySQL優(yōu)化經(jīng)驗(yàn)和方法匯總
公司網(wǎng)站訪問量越來越大,MySQL自然成為瓶頸,因此最近我一直在研究MySQL的優(yōu)化,***步自然想到的是MySQL系統(tǒng)參數(shù)的優(yōu)化,作為一個(gè)訪問量很大的網(wǎng)站(日20萬人次以上)的數(shù)據(jù)庫系統(tǒng),不可能指望 MySQL 默認(rèn)的系統(tǒng)參數(shù)能夠讓MySQL運(yùn)行得非常順暢。
在Apache, PHP, MySQL的體系架構(gòu)中,MySQL對于性能的影響***,也是關(guān)鍵的核心部分。對于Discuz!論壇程序也是如此,MySQL的設(shè)置是否合理優(yōu)化,直接 影響到論壇的速度和承載量!同時(shí),MySQL也是優(yōu)化難度***的一個(gè)部分,不但需要理解一些MySQL專業(yè)知識,同時(shí)還需要長時(shí)間的觀察統(tǒng)計(jì)并且根據(jù)經(jīng)驗(yàn)進(jìn)行判斷,然后設(shè)置合理的參數(shù)。 下面我們了解一下MySQL優(yōu)化的一些基礎(chǔ),MySQL的優(yōu)化我分為兩個(gè)部分,一是服務(wù)器物理硬件的優(yōu)化,二是MySQL自身(my.cnf)的優(yōu)化。
一、服務(wù)器硬件對MySQL性能的影響
① 磁盤尋道能力(磁盤I/O),以目前高轉(zhuǎn)速SCSI硬盤(7200轉(zhuǎn)/秒)為例,這種硬盤理論上每秒尋道7200次,這是物理特性決定的,沒有辦法改變。 MySQL每秒鐘都在進(jìn)行大量、復(fù)雜的查詢操作,對磁盤的讀寫量可想而知。所以,通常認(rèn)為磁盤I/O是制約MySQL性能的***因素之一,對于日均訪問量 在100萬PV以上的Discuz!論壇,由于磁盤I/O的制約,MySQL的性能會非常低下!解決這一制約因素可以考慮以下幾種解決方案: 使用RAID-0+1磁盤陣列,注意不要嘗試使用RAID-5,MySQL在RAID-5磁盤陣列上的效率不會像你期待的那樣快。
②CPU 對于MySQL應(yīng)用,推薦使用S.M.P.架構(gòu)的多路對稱CPU,例如:可以使用兩顆Intel Xeon 3.6GHz的CPU,現(xiàn)在我較推薦用4U的服務(wù)器來專門做數(shù)據(jù)庫服務(wù)器,不僅僅是針對于mysql。
③物理內(nèi)存對于一臺使用MySQL的Database Server來說,服務(wù)器內(nèi)存建議不要小于2GB,推薦使用4GB以上的物理內(nèi)存,不過內(nèi)存對于現(xiàn)在的服務(wù)器而言可以說是一個(gè)可以忽略的問題,工作中遇到了高端服務(wù)器基本上內(nèi)存都超過了16G。
二、 MySQL自身因素
當(dāng)解決了上述服務(wù)器硬件制約因素后,讓我們看看MySQL自身的優(yōu)化是如何操作的。對MySQL自身的優(yōu)化主要是對其配置文件 my.cnf中的各項(xiàng)參數(shù)進(jìn)行優(yōu)化調(diào)整。下面我們介紹一些對性能影響較大的參數(shù)。 由于my.cnf文件的優(yōu)化設(shè)置是與服務(wù)器硬件配置息息相關(guān)的,因而我們指定一個(gè)假想的服務(wù)器硬件環(huán)境:
- CPU:2顆Intel Xeon 2.4GHz
- 內(nèi)存:4GB DDR
- 硬盤:SCSI 73GB(很常見的2U服務(wù)器)。
下面,我們根據(jù)以上硬件配置結(jié)合一份已經(jīng)優(yōu)化好的my.cnf進(jìn)行說明:
- #vim /etc/my.cnf以下只列出my.cnf文件中[mysqld]段落中的內(nèi)容,其他段落內(nèi)容對MySQL運(yùn)行性能影響甚微,因而姑且忽略。
- [mysqld]
- port = 3306
- serverid = 1
- socket = /tmp/mysql.sock
- skip-locking
- #避免MySQL的外部鎖定,減少出錯(cuò)幾率增強(qiáng)穩(wěn)定性。
- skip-name-resolve
- #禁止MySQL對外部連接進(jìn)行DNS解析,使用這一選項(xiàng)可以消除MySQL進(jìn)行DNS解析的時(shí)間。但需要注意,如果開啟該選項(xiàng),則所有遠(yuǎn)程主機(jī)連接授權(quán)都要使用IP地址方式,否則MySQL將無法正常處理連接請求!
- back_log = 384
- #back_log 參數(shù)的值指出在MySQL暫時(shí)停止響應(yīng)新請求之前的短時(shí)間內(nèi)多少個(gè)請求可以被存在堆棧中。 如果系統(tǒng)在一個(gè)短時(shí)間內(nèi)有很多連接,則需要增大該參數(shù)的值,該參數(shù)值指定到來的TCP/IP連接的偵聽隊(duì)列的大小。不同的操作系統(tǒng)在這個(gè)隊(duì)列大小上有它自 己的限制。 試圖設(shè)定back_log高于你的操作系統(tǒng)的限制將是無效的。默認(rèn)值為50。對于Linux系統(tǒng)推薦設(shè)置為小于512的整數(shù)。
- key_buffer_size = 256M
- #key_buffer_size指定用于索引的緩沖區(qū)大小,增加它可得到更好的索引處理性能。對于內(nèi)存在4GB左右的服務(wù)器該參數(shù)可設(shè)置為256M或384M。注意:該參數(shù)值設(shè)置的過大反而會是服務(wù)器整體效率降低!
- max_allowed_packet = 4M
- thread_stack = 256K
- table_cache = 128K
- sort_buffer_size = 6M
- #查詢排序時(shí)所能使用的緩沖區(qū)大小。注意:該參數(shù)對應(yīng)的分配內(nèi)存是每連接獨(dú)占,如果有100個(gè)連接,那么實(shí)際分配的總共排序緩沖區(qū)大小為100 × 6 = 600MB。所以,對于內(nèi)存在4GB左右的服務(wù)器推薦設(shè)置為6-8M。
- read_buffer_size = 4M
- #讀查詢操作所能使用的緩沖區(qū)大小。和sort_buffer_size一樣,該參數(shù)對應(yīng)的分配內(nèi)存也是每連接獨(dú)享。
- join_buffer_size = 8M
- #聯(lián)合查詢操作所能使用的緩沖區(qū)大小,和sort_buffer_size一樣,該參數(shù)對應(yīng)的分配內(nèi)存也是每連接獨(dú)享。
- myisam_sort_buffer_size = 64M
- table_cache = 512
- thread_cache_size = 64
- query_cache_size = 64M
- # 指定MySQL查詢緩沖區(qū)的大小。可以通過在MySQL控制臺觀察,如果Qcache_lowmem_prunes的值非常大,則表明經(jīng)常出現(xiàn)緩沖不夠的 情況;如果Qcache_hits的值非常大,則表明查詢緩沖使用非常頻繁,如果該值較小反而會影響效率,那么可以考慮不用查詢緩 沖;Qcache_free_blocks,如果該值非常大,則表明緩沖區(qū)中碎片很多。
- tmp_table_size = 256M
- max_connections = 768
- #指定MySQL允許的***連接進(jìn)程數(shù)。如果在訪問論壇時(shí)經(jīng)常出現(xiàn)Too Many Connections的錯(cuò)誤提 示,則需要增大該參數(shù)值。
- max_connect_errors = 10000000
- wait_timeout = 10
- #指定一個(gè)請求的***連接時(shí)間,對于4GB左右內(nèi)存的服務(wù)器可以設(shè)置為5-10。
- thread_concurrency = 8
- #該參數(shù)取值為服務(wù)器邏輯CPU數(shù)量*2,在本例中,服務(wù)器有2顆物理CPU,而每顆物理CPU又支持H.T超線程,所以實(shí)際取值為4*2=8
- skip-networking
- #開啟該選項(xiàng)可以徹底關(guān)閉MySQL的TCP/IP連接方式,如果WEB服務(wù)器是以遠(yuǎn)程連接的方式訪問MySQL數(shù)據(jù)庫服務(wù)器則不要開啟該選項(xiàng)!否則將無法正常連接!
- table_cache=1024
- #物理內(nèi)存越大,設(shè)置就越大.默認(rèn)為2402,調(diào)到512-1024***
- innodb_additional_mem_pool_size=4M
- #默認(rèn)為2M
- innodb_flush_log_at_trx_commit=1
- #設(shè)置為0就是等到innodb_log_buffer_size列隊(duì)滿后再統(tǒng)一儲存,默認(rèn)為1
- innodb_log_buffer_size=2M
- #默認(rèn)為1M
- innodb_thread_concurrency=8
- #你的服務(wù)器CPU有幾個(gè)就設(shè)置為幾,建議用默認(rèn)一般為8
- key_buffer_size=256M
- #默認(rèn)為218,調(diào)到128***
- tmp_table_size=64M
- #默認(rèn)為16M,調(diào)到64-256最掛
- read_buffer_size=4M
- #默認(rèn)為64K
- read_rnd_buffer_size=16M
- #默認(rèn)為256K
- sort_buffer_size=32M
- #默認(rèn)為256K
- thread_cache_size=120
- #默認(rèn)為60
- query_cache_size=32M
※值得注意的是: 很多情況需要具體情況具體分析 。
如果Key_reads太大,則應(yīng)該把my.cnf中Key_buffer_size變大,保持Key_reads/Key_read_requests至少1/100以上,越小越好。