mysql tmp_table_size優(yōu)化之設(shè)置多大合適
通過設(shè)置tmp_table_size選項來增加一張臨時表的大小,例如做高級GROUP BY操作生成的臨時表。如果調(diào)高該值,MySQL同時將增加heap表的大小,可達到提高聯(lián)接查詢速度的效果,建議盡量優(yōu)化查詢,要確保查詢過程中生成的臨時表在內(nèi)存中,避免臨時表過大導(dǎo)致生成基于硬盤的MyISAM表。
mysql> show global status like ‘created_tmp%‘;
+——————————–+———+
| Variable_name | Value |
+———————————-+———+
| Created_tmp_disk_tables | 21197 |
| Created_tmp_files | 58 |
| Created_tmp_tables | 1771587 |
+——————————–+———–+
每次創(chuàng)建臨時表,Created_tmp_tables增加,如果臨時表大小超過tmp_table_size,則是在磁盤上創(chuàng)建臨時表,Created_tmp_disk_tables也增加,Created_tmp_files表示MySQL服務(wù)創(chuàng)建的臨時文件文件數(shù),比較理想的配置是:
Created_tmp_disk_tables / Created_tmp_tables * 100% <= 25%比如上面的服務(wù)器Created_tmp_disk_tables / Created_tmp_tables * 100% =1.20%,應(yīng)該相當(dāng)好了
默認(rèn)為16M,可調(diào)到64-256最佳,線程獨占,太大可能內(nèi)存不夠I/O堵塞
如果動態(tài)頁面要調(diào)大點,100M以上,如果網(wǎng)站大部分都是靜態(tài)內(nèi)容,一般64M足夠。
tmp_table_size優(yōu)化
數(shù)據(jù)庫連接突然增多到1000的問題
查看了一下,未有LOCK操作語句。
但是明顯有好多copy to tmp table的SQL語句,這條語讀的時間比較長,且這個表會被加讀鎖,相關(guān)表的update語句會被排進隊列。如果多執(zhí)行幾次這樣的copyt to tmp table 語句,會造成更多的語句被阻塞。
連接太多造成mysql處理慢。
copy to tmp talbe 語句產(chǎn)生的原因是查詢需要Order By 或者Group By等需要用到結(jié)果集時,參數(shù)中設(shè)置的臨時表的大小小于結(jié)果集的大小時,就會將該表放在磁盤上,這個時候在硬盤上的IO要比內(nèi)銷差很多。所耗費的時間也多很多。另外Mysql的另外一個參數(shù)max_heap_table_size比tmp_table_size小時,則系統(tǒng)會把max_heap_table_size的值作為最大的內(nèi)存臨時表的上限,大于這個時,改寫硬盤。
我們的mysql這兩個參數(shù)為:
tmp_table_size 33554432 (33.5M)
max_heap_table_size 16777216 (16.7M)
比較小。
建議增加到上百M。我們的內(nèi)存應(yīng)該夠吧。
另外join_buffer_size(影響 表之間join性能的緩存)為131072 (131K)較小,可以增加一點。
[root@mail ~]# vi /etc/my.cnf
[mysqld]
tmp_table_size=200M
mysql> show processlist;
mysql> show columns from wp_posts;
SQL 語句的第一個 LEFT JOIN ON 子句中: LEFT JOIN _myuser AS t3 ON t1.userid=t3.userid _mydata 的 userid 被參與了條件比較運算。為 _mydata 表根據(jù)字段 userid 建立了一個索引: mysql> ALTER TABLE `_mydata` ADD INDEX ( `userid` ) 增加 tmp_table_size 值。
mysql 的配置文件中,tmp_table_size 的默認(rèn)大小是 32M。如果一張臨時表超出該大小,MySQL產(chǎn)生一個 The table tbl_name is full 形式的錯誤,如果你做很多高級 GROUP BY 查詢,增加 tmp_table_size 值。 這是 mysql 官方關(guān)于此選項的解釋:
tmp_table_size
This variable determines the maximum size for a temporary table in memory. If the table becomes too large, a MYISAM table is created on disk. Try to avoid temporary tables by optimizing the queries where possible, but where this is not possible, try to ensure temporary tables are always stored in memory. Watching the processlist for queries with temporary tables that take too long to resolve can give you an early warning that tmp_table_size needs to be upped. Be aware that memory is also allocated per-thread. An example where upping this worked for more was a server where I upped this from 32MB (the default) to 64MB with immediate effect. The quicker resolution of queries resulted in less threads being active at any one time, with all-round benefits for the server, and available memory.
對 WHERE, JOIN, MAX(), MIN(), ORDER BY 等子句中的條件判斷中用到的字段,應(yīng)該根據(jù)其建立索引INDEX。
索引被用來快速找出在一個列上用一特定值的行。沒有索引,MySQL不得不首先以第一條記錄開始并然后讀完整個表直到它找出相關(guān)的行。表越大,花費時間越多。如果表對于查詢的列有一個索引,MySQL能快速到達一個位置去搜尋到數(shù)據(jù)文件的中間,沒有必要考慮所有數(shù)據(jù)。如果一個表有1000行,這比順序讀取至少快100倍。所有的MySQL索引(PRIMARY、UNIQUE和INDEX)在B樹中存儲。
根據(jù) mysql 的開發(fā)文檔:
索引 index 用于:
快速找出匹配一個WHERE子句的行
當(dāng)執(zhí)行聯(lián)結(jié)(JOIN)時,從其他表檢索行。
對特定的索引列找出MAX()或MIN()值
如果排序或分組在一個可用鍵的最左面前綴上進行(例如,ORDER BY key_part_1,key_part_2),排序或分組一個表。如果所有鍵值部分跟隨DESC,鍵以倒序被讀取。
在一些情況中,一個查詢能被優(yōu)化來檢索值,不用咨詢數(shù)據(jù)文件。如果對某些表的所有使用的列是數(shù)字型的并且構(gòu)成某些鍵的最左面前綴,為了更快,值可以從索引樹被檢索出來。
假定你發(fā)出下列SELECT語句:
mysql> select * FROM tbl_name WHERE col1=val1 AND col2=val2;如果一個多列索引存在于col1和col2上,適當(dāng)?shù)男锌梢灾苯颖蝗〕?。如果分開的單行列索引存在于col1和col2上,優(yōu)化器試圖通過決定哪個索引將找到更少的行并來找出更具限制性的索引并且使用該索引取行。
一般動態(tài)設(shè)置tmp_table_size的大小的時候,要使用:
set global tmp_table_size=64*1024*1024
set global tmp_table_size=64M
#1232 - Incorrect argument type to variable 'tmp_table_size'
- MySQL 性能優(yōu)化的最佳20多條經(jīng)驗分享
- MySQL配置文件my.cnf參數(shù)優(yōu)化和中文詳解
- MySQL Order by 語句用法與優(yōu)化詳解
- MySQL性能優(yōu)化之max_connections配置參數(shù)淺析
- MySQL優(yōu)化必須調(diào)整的10項配置
- 淺談MySQL中優(yōu)化sql語句查詢常用的30種方法
- MySQL 百萬級分頁優(yōu)化(Mysql千萬級快速分頁)
- Mysql查詢最近一條記錄的sql語句(優(yōu)化篇)
- MySQL查詢優(yōu)化之explain的深入解析
- 30種SQL語句優(yōu)化的方法匯總
相關(guān)文章
mysql中一個普通ERROR 1135 (HY000)錯誤引發(fā)的血案
ERROR 1135 (HY000): Can’t create a new thread (errno 11);if you are not out of available memory,you can consult the manual for a possible OS-dependent bug2015-08-08windows版本下mysql的安裝啟動和基礎(chǔ)配置圖文教程詳解
本文通過圖文并茂的形式給大家介紹了windows版本下mysql的安裝啟動和基礎(chǔ)配置圖文教程,非常不錯,具有一定的參考借鑒價值,需要的朋友可以參考下2019-06-06與MSSQL對比學(xué)習(xí)MYSQL的心得(七)--查詢
在這個《與MSSQL對比學(xué)習(xí)MYSQL的心得》系列里面,我一直都把MYSQL跟SQLSERVER進行比較,相互進行比較是學(xué)習(xí)一樣?xùn)|西比較好的方法2014-08-08詳解數(shù)據(jù)庫連接的URL的寫法及總結(jié)
這篇文章主要介紹了詳解數(shù)據(jù)庫連接的URL的寫法及總結(jié)的相關(guān)資料這里提供了四種方法1、oracle.2、MySQL.3、SQL Server.4、DB2,需要的朋友可以參考下2017-07-07MySql修改數(shù)據(jù)庫編碼為UTF8避免造成亂碼問題
mysql 創(chuàng)建數(shù)據(jù)庫時指定編碼很重要,很多開發(fā)者都使用了默認(rèn)編碼,亂碼問題可是防不勝防,下面與大家分享下通過修改數(shù)據(jù)庫默認(rèn)編碼方式為UTF8來減少數(shù)據(jù)庫創(chuàng)建時的設(shè)置,避免因粗心造成的亂碼問題2013-06-06MySQL事務(wù)的四大特性以及并發(fā)事務(wù)問題解讀
這篇文章主要介紹了MySQL事務(wù)的四大特性以及并發(fā)事務(wù)問題,具有很好的參考價值,希望對大家有所幫助,如有錯誤或未考慮完全的地方,望不吝賜教2023-09-09