目錄
- 1)連接請求的變量
- 1、max_connections
- 2、back_log
- 3、wait_timeout和interative_timeout
- 2)緩沖區(qū)變量
- 5、query_cache_size(查詢緩存簡稱QC)
- 6、max_connect_errors:
- 7、sort_buffer_size:
- 8、max_allowed_packet=32M
- 9、join_buffer_size=2M
- 10、thread_cache_size=300
- 3)配置Innodb的幾個變量
- 11、innodb_buffer_pool_size
- 12、innodb_flush_log_at_trx_commit
- 13、innodb_thread_concurrency=0
- 14、innodb_log_buffer_size
- 15、innodb_log_file_size=50M
- 16、innodb_log_files_in_group=3
- 17、read_buffer_size=1M
- 18、read_rnd_buffer_size=16M
- 19、bulk_insert_buffer_size=64M
- 20、binary log
- 參數(shù)匯總:
MySQL參數(shù)優(yōu)化對于不同的網(wǎng)站,及其在線量,訪問量,帖子數(shù)量,網(wǎng)絡(luò)情況,以及機(jī)器硬件配置都有關(guān)系,優(yōu)化不可能一次性完成,需要不斷的觀察以及調(diào)試,才有可能得到最佳的效果。
1)連接請求的變量
1、max_connections
MySQL的最大連接數(shù),如果服務(wù)器的并發(fā)連接請求量較大,建議調(diào)高此值,以增加并行連接數(shù)量,當(dāng)然這建立在機(jī)器能支撐的情況下,因?yàn)槿绻B接數(shù)越多,MySQL回味每個連接提供連接緩沖區(qū),就會開銷越多的內(nèi)存,所以要適當(dāng)調(diào)整該值,不能盲目提高設(shè)值。
數(shù)值過小經(jīng)常會出現(xiàn)ERROR 1040:Too mant connetcions錯誤,可以通過mysql>show status like ‘connections';通配符來查看當(dāng)前狀態(tài)的連接數(shù)量(試圖連接到MySQL(不管是否連接成功)的連接數(shù)),以定奪該值的大小。
show variadles like ‘max_connections'最大連接數(shù)
show variables like ‘max_used_connection'相應(yīng)連接數(shù)
max_used_connection/max_connections*100%(理想值約等于85%)
如果max_used_connections和max_connections相同,那么就是max_connections值設(shè)置過低或者超過服務(wù)器的負(fù)載上限了,低于10%則設(shè)置過大了。
2、back_log
MySQL能夠暫存的連接數(shù)量。當(dāng)主要MySQL線程在一個很短時(shí)間內(nèi)得到非常多的連接請求,他就會起作用。如果MySQL的連接數(shù)據(jù)達(dá)到max_connections時(shí),新的請求將會被存在堆棧中,以等待某一連接釋放資源,該堆棧數(shù)量即back_log,如果等待連接的數(shù)量超過back_log,將不被接受連接資源。
3、wait_timeout和interative_timeout
wait_timeout:指的是MySQL再關(guān)閉一個非交互的連接之前所需要等待的秒數(shù)。
interative_timeout:指的是關(guān)閉一個交互的連接之前所需要等待的秒數(shù)。
對性能的影響
wait_timeout
(1)如果設(shè)置太小,那么連接關(guān)閉的很快,從而使一些持久的連接不起作用
(2)如果設(shè)置太大容易造成連接打開時(shí)間過長,在show processlist時(shí),能夠看到太多的sleep狀態(tài)的連接,從而造成too many connections錯誤。
(3)一般希望wait_timeuot盡可能的低
interative_timeout的設(shè)置將對你的web application沒有多大的影響
2)緩沖區(qū)變量
全局緩沖
4、key_buffer_size
key_buffer_size指定索引緩沖區(qū)的大小,他決定索引的處理速度,尤其是索引讀的速度。通過檢查狀態(tài)值 key_read_requests和key_reads,可以知道key_buffer_size設(shè)置是否合理。比例key_reads/key_read_requests應(yīng)該盡可能的低,至少是1:100,1:1000更好(上述狀態(tài)值可以使用show status like ‘key_read%'獲得)
未命中緩存的概率:
key_cache_miss_rate = key_reads/key_read_requests*100%
key_buffer_size只對MAISAM表起作用。
如何調(diào)整key_buffer_size的值
默認(rèn)的配置數(shù)時(shí)8388608(8M),主機(jī)有4G內(nèi)存可以調(diào)優(yōu)值為268435456(256M)
5、query_cache_size(查詢緩存簡稱QC)
使用查詢緩存,MySQL將查詢結(jié)果存放在緩沖區(qū)中,今后對同樣的select語句(區(qū)分大小寫),將直接從緩沖區(qū)中讀取結(jié)果。
一個SQL查詢?nèi)绻詓elect開頭,那么MySQL服務(wù)器將嘗試對其使用查詢緩存。
注:兩個SQL語句,只要相差哪怕是一個字符(例如 大小寫不一樣:多一個空格等),那么兩個SQL將使用不同的cache
通過 show ststus like ‘Qcache%' 可以知道query_cache_size的設(shè)置是否合理
Qcache_free_blocks:緩存中相鄰內(nèi)存塊的個數(shù)。如果該值顯示過大,則說明Query Cache中的內(nèi)存碎片較多了。
注:當(dāng)一個表被更新后,和他相關(guān)的cache block將被free。但是這個block依然可能存在隊(duì)列中,除非是在隊(duì)列的尾部??梢杂?flush query cache語句來清空free blocks。
Qcache_free_memory:Query Cache 中目前剩余的內(nèi)存大小。通過這個參數(shù)我們可以較為準(zhǔn)確的觀察當(dāng)前系統(tǒng)中的Query Cache內(nèi)存大小是否足夠,是需要增多還是過多了。
Qcache_hits:表示有多少次命中緩存。我們主要可以通過該值來驗(yàn)證我們的查詢能緩存的效果。數(shù)字越大緩存效果越理想。
Qcache_inserts:表示多少次未命中而插入,意思是新來的SQL請求在緩存中未找到,不得不執(zhí)行查詢處理,執(zhí)行查詢處理后把結(jié)果insert帶查詢緩存中。這樣的情況次數(shù)越多,表示查詢緩存 應(yīng)用到的比較少,效果也就不理想。
Qcache_lowmen_prunes:多少條Query因?yàn)閮?nèi)存不足而被清除出Query Cache,通過Qcache_lowmem_prunes和Qcache_free_memory 相互結(jié)合,能夠更清楚的了解到我們系統(tǒng)中Query Cache的內(nèi)存大小是否真的足夠,是否非常頻繁的出現(xiàn)因?yàn)閮?nèi)存不足而有Query被換出。這個數(shù)字最好是長時(shí)間來看,如果這個數(shù)字在不斷增長,就表示可能碎片化非常嚴(yán)重,或者內(nèi)存很少。
Qcache_queries_in_cache:當(dāng)前Query Cache 中cache的Query數(shù)量
Qcache_total_blocks:當(dāng)前Query Cache中block的數(shù)量
查詢服務(wù)器關(guān)于query_cache的配置
各字段的解釋:
query_cache_limit:超出此大小的查詢將不被緩存
query_cache_min_res_unit:緩存塊的最小大小,query_cache_min_res_unit的配置是一柄雙刃劍,默認(rèn)是 4KB ,設(shè)置值大對大數(shù)據(jù)查詢有好處,但是如果你查詢的都是小數(shù)據(jù)查詢,就容易造成內(nèi)存碎片和浪費(fèi)。
query_cache_size:查詢緩存大?。ㄗⅲ篞C存儲的單位最小是1024byte,所以如果你設(shè)定的一個不是1024的倍數(shù)的值。這個值會被四舍五入到最接近當(dāng)前值的等于1024的倍數(shù)的值。)
query_cache_type:緩存類型,決定緩存什么樣子的查詢,注意這個值不能隨便設(shè)置必須設(shè)置為數(shù)字,可選值以及說明如下:
0:OFF 相當(dāng)于禁用了
1:ON 將緩存所有結(jié)果,除非你的select語句使用了SQL_NO_CACHE禁用了查詢緩存
2:DENAND 則只緩存select語句中通過SQL_CACHE指定需要緩存的查詢。
query_cache_wlock_invalidate:當(dāng)有其他客戶端正在對MyISAM表進(jìn)行寫操作時(shí),如果查詢在query cache中,是否返回cache結(jié)果還是等寫操作完成在讀表獲取結(jié)果。
查詢緩存碎片率:Qcache_free_block/Qcache_total_block*100%
如果查詢緩存碎片率超過20%,可以用flush query cache整理緩存碎片,或者試試減小query_cache_min_res_unit,如果你的查詢都是小數(shù)據(jù)量的話。
查詢緩存利用率:(query_cache_size-Qcache_free_memory)/query_cache_size*100%
查詢緩存利用率在25%以下的話說明query_cache_size設(shè)置過大,可以適當(dāng)減?。翰樵兙彺胬寐试?0%以上而且Qcache_lowmem_prunes>50
的話說明query_cache_size可能有點(diǎn)小,要不就是碎片太多
查詢緩存命中率:Qcache_hits/(Qcache_hits+Qcache_inserts)*100%
Query Cache的限制
a)所有子查詢中的外部查詢SQL 不能被Cache:
b)在p'rocedure,function以及trigger中的Query不能被Cache
c)包含其他很多每次執(zhí)行可能得到不一樣的結(jié)果的函數(shù)的Query不能被Cache
6、max_connect_errors:
是一個MySQL中與安全有關(guān)的計(jì)數(shù)器值,他負(fù)責(zé)阻止過多嘗試失敗的客戶端以防止暴力破解密碼的情況,當(dāng)超過指定次數(shù),MySQL服務(wù)器將禁止host的連接請求,直到mysql服務(wù)器重啟或通過flush hotos命令清空此host的相關(guān)信息。(與性能并無太大的關(guān)系)
7、sort_buffer_size:
每個需要排序的線程分配該大小的一個緩沖區(qū)。增加這值加速ORDER BY 或 GROUP BY操作
sort_buffer_size是一個connection級的參數(shù),在每個connection(session)第一次需要使用這個buffer的時(shí)候,一次性分配設(shè)置的內(nèi)存。
sort_buffer_size:并不是越大越好,由于是connection級的參數(shù),過大的設(shè)置+高并發(fā)可能會耗盡系統(tǒng)的內(nèi)存資源。例如:500個連接將會消耗500*sort_buffer_size(2M)=1G
8、max_allowed_packet=32M
根據(jù)配置文件限制server接受的數(shù)據(jù)包大小。
9、join_buffer_size=2M
用于表示關(guān)聯(lián)緩存的大小,和sort_buffer_size一樣,該參數(shù)對應(yīng)的分配內(nèi)存也是每個連接獨(dú)享。
10、thread_cache_size=300
服務(wù)器線程緩存,這個值表示可以重新利用保存在緩存中的線程數(shù)量,當(dāng)斷開連接時(shí),那么客戶端的線程將被放到緩存中以響應(yīng)下一個客戶而不是銷毀(前提時(shí)緩存數(shù)未達(dá)上限),如果線程重新被請求,那么請求將從緩存中讀取,如果緩存中是空的或者是新的請求,這個線程將被重新請求,那么這個線程將被重新創(chuàng)建,如果有很多新的線程,增加這個值可以改善系統(tǒng)性能,通過比較Connections和Threads_created狀態(tài)的變量,可以看到這個變量的作用。
設(shè)置規(guī)則如下:1G內(nèi)存配置為8,2G內(nèi)存為16.服務(wù)器處理此客戶的線程將會緩存起來以響應(yīng)下一個客戶而不是被銷毀(前提是緩存數(shù)未到達(dá)上限)
Threads_cached:代表當(dāng)前此時(shí)此刻線程緩存中有多少空閑線程。
Threads_connected:代表當(dāng)前已建立連接的數(shù)量,因?yàn)橐粋€連接就需要一個線程,所以也可以看成當(dāng)前被使用的線程數(shù)。
Threads_created:代表最近一次服務(wù)啟動,已創(chuàng)建線程的數(shù)量,如果發(fā)現(xiàn)Threads_created值過大的話,說明MySQL服務(wù)器一直在創(chuàng)建線程,這也比較消耗資源,可以適當(dāng)增加配置文件中thread_cache_size值
Threads_running:代表當(dāng)前激活的(非睡眠狀態(tài))線程數(shù)。并不是代表正在使用的線程數(shù),有時(shí)候連接已建立,但是連接處于sleep狀態(tài)。
3)配置Innodb的幾個變量
11、innodb_buffer_pool_size
對于innodb表來說,innodb_buffer_pool_size的作用相當(dāng)于key_buffer_size對于MyISAM表的作用一樣。Innodb使用該參數(shù)指定大小的內(nèi)存來緩沖數(shù)據(jù)和索引。最大可以把該值設(shè)置成物理內(nèi)存的80%。
12、innodb_flush_log_at_trx_commit
主要控制了innodb將log buffer中的數(shù)據(jù)寫入日志文件并flush磁盤的時(shí)間點(diǎn),取值分別為0,1,2.
實(shí)際測試發(fā)現(xiàn),該值對插入數(shù)據(jù)的速度影響非常大,設(shè)置為2時(shí)插入10000條記錄只需要兩秒,設(shè)置為0時(shí)只需要一秒,設(shè)置為1時(shí),則需要229秒。因此,MySQL手冊也建議盡量將插入操作合并成一個事務(wù),這樣可以大幅度提高速度。
13、innodb_thread_concurrency=0
此參數(shù)用來設(shè)置innodb線程的并發(fā)數(shù),默認(rèn)值為0表示不被限制,若要設(shè)置則與服務(wù)器的CPU核心數(shù)相同或是CPU的核心數(shù)的2倍。
14、innodb_log_buffer_size
此參數(shù)確定日志文件所用的內(nèi)存大小,以M為單位。緩沖區(qū)更大能提高性能,對于較大的事務(wù),可以增大緩存大小。
15、innodb_log_file_size=50M
此參數(shù)確定數(shù)據(jù)日志文件的大小,以M為單位,更大的設(shè)置可以提高性能。
16、innodb_log_files_in_group=3
為提高性能,MySQL可以以循環(huán)方式將日志文件寫到多個文件。推薦設(shè)置為3
17、read_buffer_size=1M
MySQL 讀入緩沖區(qū)大小。對表進(jìn)行順序掃描的請求將分配到一個讀入緩沖區(qū)MySQL會為他分配一段內(nèi)存緩沖區(qū)
18、read_rnd_buffer_size=16M
MySQL 的隨機(jī)讀(查詢操作)緩沖區(qū)大小。當(dāng)按任意順序讀取行時(shí)(例如,按照排序順序),將分配到一個隨機(jī)都緩沖區(qū)。進(jìn)行排序查詢時(shí),MySQL會首先掃描一遍該緩沖區(qū),以避免磁盤搜索,提高查詢速度,如果需要排序大量數(shù)據(jù),可適當(dāng)調(diào)高該值。但是MySQL會為每個客戶連接發(fā)放該緩沖空間,所以應(yīng)盡量適當(dāng)設(shè)置該值,以避免內(nèi)存消耗過大。
注:順序讀是根據(jù)索引的葉節(jié)點(diǎn)數(shù)據(jù)就能順序的讀取所需要的行數(shù)據(jù)。隨機(jī)讀是指一般需要根據(jù)輔助索引葉節(jié)點(diǎn)中的主鍵尋找侍其巷進(jìn)行數(shù)據(jù),而輔助索引和主鍵所在的數(shù)據(jù)端不同,因此訪問方式是隨機(jī)的。
19、bulk_insert_buffer_size=64M
批量插入數(shù)據(jù)緩存大小,可以有效的提高插入效率,默認(rèn)為8M
20、binary log
binlog_cache_size=2M //為每個session分配的內(nèi)存,在事務(wù)過程中用來存儲二進(jìn)制日志的緩存,提高記錄bin-log的效率。
max_binlog_cache_size=8M //表示的是binlog能夠使用的最大cache內(nèi)存大小
max_binlog_size=512M //指定binlog日志文件的大小。不能將變量設(shè)置為大于1G或小于4096字節(jié)。默認(rèn)值為1G.在導(dǎo)入大容量的sql文件時(shí),建議關(guān)閉,sql_log_bin,否則硬盤扛不住,而且建議定期做刪除。
expire_logs_days=7 //定義了mysql清除過期日志的時(shí)間
參數(shù)匯總:
[mysqld]
basedir = /usr/local/mysql
datadir = /usr/local/mysql/data
server_id = 1
socket = /usr/local/mysql/mysql.sock
log-error = /usr/local/mysql/data/mysqld.err
slow_query_log = 1
slow_query_log_file=/usr/local/mysql/data/slow-query.log
long_query_time = 1
log-queries-not-using-indexes
max_connections = 1024
back_log = 128
wait_timeout = 60
interactive_timeout = 7200
key_buffer_size = 256M
query_cache_size = 256M
query_cache_type = 1
query_cache_limit = 50M
max_connect_errors = 20
sort_buffer_size = 2M
max_allowed_packet = 32M
join_buffer_size = 2M
thread_cache_size = 200
innodb_buffer_pool_size = 2048M
innodb_flush_log_at_trx_commit = 1
innodb_log_buffer_size = 32M
innodb_log_file_size = 128M
innodb_log_files_in_group = 3
log-bin=/usr/local/mysql/data/mysqlbin
binlog_cache_size = 2M
max_binlog_cache_size = 8M
max_binlog_size = 512M
expire_logs_days = 7
read_buffer_size = 1M
read_rnd_buffer_size = 16M
bulk_insert_buffer_size = 64M
# Remove leading # and set to the amount of RAM for the most important data
# cache in MySQL. Start at 70% of total RAM for dedicated server, else 10%.
# innodb_buffer_pool_size = 128M
# Remove leading # to turn on a very important data integrity option: logging
# changes to the binary log between backups.
# log_bin
# These are commonly set, remove the # and set as required.
# basedir = .....
# datadir = .....
# port = .....
# server_id = .....
# socket = .....
# Remove leading # to set options mainly useful for reporting servers.
# The server defaults are faster for transactions and fast SELECTs.
# Adjust sizes as needed, experiment to find the optimal values.
# join_buffer_size = 128M
# sort_buffer_size = 2M
# read_rnd_buffer_size = 2M
sql_mode=NO_ENGINE_SUBSTITUTION,STRICT_TRANS_TABLES
您可能感興趣的文章:- MySql數(shù)據(jù)庫備份的幾種方式
- Mysql查詢語句優(yōu)化技巧
- MySQL中的binary類型使用操作