最近把MySQL升級到了5.6版本，無意中在任務管理器發(fā)現(xiàn)MySQL內存占用達到400+M，這是怎么回事呢？以前的版本可沒有遇到過這種情況啊。開始的時候還以為是緩存了某個數(shù)據量較大的表的數(shù)據。于是重啟MySQL服務，但結果出乎意料，MySQL服務一起啟動，內存就又飆升到400+M。心想，這肯定不是緩存的那個表數(shù)據的問題了。接下來就是尋找解決MySQL 5.6 內存占用過高這個問題的解決方案了。 經過實驗測試，修改一下my.ini這個配置文件的配置選項是可以限制MySQL5.6內存占用過高這一問題的，具體修改選項如下：
performance_schema_max_table_instances=400
table_definition_cache=400
table_open_cache=256
你如果在my.ini這個文件沒中找到以上配置選項，則追加到該文件中即可。 完成以上配置的修改，重啟MySQL服務。這個MySQL的內存占用從修改前的400+M直接降到40+M。 再也不會擔心MySQL占用內存過高的問題啦^_^
vps的內存為512M,安裝好nginx,php等啟動起來,mysql死活啟動不起來看了日志只看到對應pid被結束了,后跟蹤看發(fā)現(xiàn)是內存不足被killed;
調整my.cnf 參數(shù),重新配置（系統(tǒng)默認配置太高直接占用400M內存,小玩家玩不起呢）即可
| performance_schema_max_table_instances=200table_definition_cache=200table_open_cache=128 |
下面附一個相關的my.cnf配置文件的說明
| [client]port = 3306socket = /tmp/mysql.sock[mysqld]port = 3306socket = /tmp/mysql.sockbasedir = /usr/local/mysqldatadir = /data/mysqlpid-file = /data/mysql/mysql.piduser = mysqlbind-address = 0.0.0.0server-id = 1 #表示是本機的序號為1,一般來講就是master的意思skip-name-resolve# 禁止MySQL對外部連接進行DNS解析，使用這一選項可以消除MySQL進行DNS解析的時間。但需要注意，如果開啟該選項，# 則所有遠程主機連接授權都要使用IP地址方式，否則MySQL將無法正常處理連接請求#skip-networkingback_log = 600# MySQL能有的連接數(shù)量。當主要MySQL線程在一個很短時間內得到非常多的連接請求，這就起作用，# 然后主線程花些時間(盡管很短)檢查連接并且啟動一個新線程。back_log值指出在MySQL暫時停止回答新請求之前的短時間內多少個請求可以被存在堆棧中。# 如果期望在一個短時間內有很多連接，你需要增加它。也就是說，如果MySQL的連接數(shù)據達到max_connections時，新來的請求將會被存在堆棧中，# 以等待某一連接釋放資源，該堆棧的數(shù)量即back_log，如果等待連接的數(shù)量超過back_log，將不被授予連接資源。# 另外，這值（back_log）限于您的操作系統(tǒng)對到來的TCP/IP連接的偵聽隊列的大小。# 你的操作系統(tǒng)在這個隊列大小上有它自己的限制（可以檢查你的OS文檔找出這個變量的最大值），試圖設定back_log高于你的操作系統(tǒng)的限制將是無效的。max_connections = 1000# MySQL的最大連接數(shù)，如果服務器的并發(fā)連接請求量比較大，建議調高此值，以增加并行連接數(shù)量，當然這建立在機器能支撐的情況下，因為如果連接數(shù)越多，介于MySQL會為每個連接提供連接緩沖區(qū)，就會開銷越多的內存，所以要適當調整該值，不能盲目提高設值。可以過‘conn%‘通配符查看當前狀態(tài)的連接數(shù)量，以定奪該值的大小。max_connect_errors = 6000# 對于同一主機，如果有超出該參數(shù)值個數(shù)的中斷錯誤連接，則該主機將被禁止連接。如需對該主機進行解禁，執(zhí)行：FLUSH HOST。open_files_limit = 65535# MySQL打開的文件描述符限制，默認最小1024;當open_files_limit沒有被配置的時候，比較max_connections*5和ulimit -n的值，哪個大用哪個，# 當open_file_limit被配置的時候，比較open_files_limit和max_connections*5的值，哪個大用哪個。table_open_cache = 128# MySQL每打開一個表，都會讀入一些數(shù)據到table_open_cache緩存中，當MySQL在這個緩存中找不到相應信息時，才會去磁盤上讀取。默認值64# 假定系統(tǒng)有200個并發(fā)連接，則需將此參數(shù)設置為200*N(N為每個連接所需的文件描述符數(shù)目)；# 當把table_open_cache設置為很大時，如果系統(tǒng)處理不了那么多文件描述符，那么就會出現(xiàn)客戶端失效，連接不上max_allowed_packet = 4M# 接受的數(shù)據包大小；增加該變量的值十分安全，這是因為僅當需要時才會分配額外內存。例如，僅當你發(fā)出長查詢或MySQLd必須返回大的結果行時MySQLd才會分配更多內存。# 該變量之所以取較小默認值是一種預防措施，以捕獲客戶端和服務器之間的錯誤信息包，并確保不會因偶然使用大的信息包而導致內存溢出。binlog_cache_size = 1M# 一個事務，在沒有提交的時候，產生的日志，記錄到Cache中；等到事務提交需要提交的時候，則把日志持久化到磁盤。默認binlog_cache_size大小32Kmax_heap_table_size = 8M# 定義了用戶可以創(chuàng)建的內存表(memory table)的大小。這個值用來計算內存表的最大行數(shù)值。這個變量支持動態(tài)改變tmp_table_size = 16M# MySQL的heap（堆積）表緩沖大小。所有聯(lián)合在一個DML指令內完成，并且大多數(shù)聯(lián)合甚至可以不用臨時表即可以完成。# 大多數(shù)臨時表是基于內存的(HEAP)表。具有大的記錄長度的臨時表 (所有列的長度的和)或包含BLOB列的表存儲在硬盤上。# 如果某個內部heap（堆積）表大小超過tmp_table_size，MySQL可以根據需要自動將內存中的heap表改為基于硬盤的MyISAM表。還可以通過設置tmp_table_size選項來增加臨時表的大小。也就是說，如果調高該值，MySQL同時將增加heap表的大小，可達到提高聯(lián)接查詢速度的效果read_buffer_size = 2M# MySQL讀入緩沖區(qū)大小。對表進行順序掃描的請求將分配一個讀入緩沖區(qū)，MySQL會為它分配一段內存緩沖區(qū)。read_buffer_size變量控制這一緩沖區(qū)的大小。# 如果對表的順序掃描請求非常頻繁，并且你認為頻繁掃描進行得太慢，可以通過增加該變量值以及內存緩沖區(qū)大小提高其性能read_rnd_buffer_size = 8M# MySQL的隨機讀緩沖區(qū)大小。當按任意順序讀取行時(例如，按照排序順序)，將分配一個隨機讀緩存區(qū)。進行排序查詢時，# MySQL會首先掃描一遍該緩沖，以避免磁盤搜索，提高查詢速度，如果需要排序大量數(shù)據，可適當調高該值。但MySQL會為每個客戶連接發(fā)放該緩沖空間，所以應盡量適當設置該值，以避免內存開銷過大sort_buffer_size = 8M# MySQL執(zhí)行排序使用的緩沖大小。如果想要增加ORDER BY的速度，首先看是否可以讓MySQL使用索引而不是額外的排序階段。# 如果不能，可以嘗試增加sort_buffer_size變量的大小join_buffer_size = 8M# 聯(lián)合查詢操作所能使用的緩沖區(qū)大小，和sort_buffer_size一樣，該參數(shù)對應的分配內存也是每連接獨享thread_cache_size = 8# 這個值（默認8）表示可以重新利用保存在緩存中線程的數(shù)量，當斷開連接時如果緩存中還有空間，那么客戶端的線程將被放到緩存中，# 如果線程重新被請求，那么請求將從緩存中讀取,如果緩存中是空的或者是新的請求，那么這個線程將被重新創(chuàng)建,如果有很多新的線程，# 增加這個值可以改善系統(tǒng)性能.通過比較Connections和Threads_created狀態(tài)的變量，可以看到這個變量的作用。(–>表示要調整的值)# 根據物理內存設置規(guī)則如下：# 1G —> 8# 2G —> 16# 3G —> 32# 大于3G —> 64query_cache_size = 8M#MySQL的查詢緩沖大小（從4.0.1開始，MySQL提供了查詢緩沖機制）使用查詢緩沖，MySQL將SELECT語句和查詢結果存放在緩沖區(qū)中，# 今后對于同樣的SELECT語句（區(qū)分大小寫），將直接從緩沖區(qū)中讀取結果。根據MySQL用戶手冊，使用查詢緩沖最多可以達到238%的效率。# 通過檢查狀態(tài)值‘Qcache_%‘，可以知道query_cache_size設置是否合理：如果Qcache_lowmem_prunes的值非常大，則表明經常出現(xiàn)緩沖不夠的情況，# 如果Qcache_hits的值也非常大，則表明查詢緩沖使用非常頻繁，此時需要增加緩沖大小；如果Qcache_hits的值不大，則表明你的查詢重復率很低，# 這種情況下使用查詢緩沖反而會影響效率，那么可以考慮不用查詢緩沖。此外，在SELECT語句中加入SQL_NO_CACHE可以明確表示不使用查詢緩沖query_cache_limit = 2M#指定單個查詢能夠使用的緩沖區(qū)大小，默認1Mkey_buffer_size = 4M#指定用于索引的緩沖區(qū)大小，增加它可得到更好處理的索引(對所有讀和多重寫)，到你能負擔得起那樣多。如果你使它太大，# 系統(tǒng)將開始換頁并且真的變慢了。對于內存在4GB左右的服務器該參數(shù)可設置為384M或512M。通過檢查狀態(tài)值Key_read_requests和Key_reads，# 可以知道key_buffer_size設置是否合理。比例key_reads/key_read_requests應該盡可能的低，# 至少是1:100，1:1000更好(上述狀態(tài)值可以使用SHOW STATUS LIKE ‘key_read%‘獲得)。注意：該參數(shù)值設置的過大反而會是服務器整體效率降低ft_min_word_len = 4# 分詞詞匯最小長度，默認4transaction_isolation = REPEATABLE-READ# MySQL支持4種事務隔離級別，他們分別是：# READ-UNCOMMITTED, READ-COMMITTED, REPEATABLE-READ, SERIALIZABLE.# 如沒有指定，MySQL默認采用的是REPEATABLE-READ，ORACLE默認的是READ-COMMITTEDlog_bin = mysql-binbinlog_format = mixedexpire_logs_days = 30 #超過30天的binlog刪除log_error = /data/mysql/mysql-error.log #錯誤日志路徑slow_query_log = 1long_query_time = 1 #慢查詢時間 超過1秒則為慢查詢slow_query_log_file = /data/mysql/mysql-slow.logperformance_schema = 0explicit_defaults_for_timestamp#lower_case_table_names = 1 #不區(qū)分大小寫skip-external-locking #MySQL選項以避免外部鎖定。該選項默認開啟default-storage-engine = InnoDB #默認存儲引擎innodb_file_per_table = 1# InnoDB為獨立表空間模式，每個數(shù)據庫的每個表都會生成一個數(shù)據空間# 獨立表空間優(yōu)點：# 1．每個表都有自已獨立的表空間。# 2．每個表的數(shù)據和索引都會存在自已的表空間中。# 3．可以實現(xiàn)單表在不同的數(shù)據庫中移動。# 4．空間可以回收（除drop table操作處，表空不能自已回收）# 缺點：# 單表增加過大，如超過100G# 結論：# 共享表空間在Insert操作上少有優(yōu)勢。其它都沒獨立表空間表現(xiàn)好。當啟用獨立表空間時，請合理調整：innodb_open_filesinnodb_open_files = 500# 限制Innodb能打開的表的數(shù)據，如果庫里的表特別多的情況，請增加這個。這個值默認是300innodb_buffer_pool_size = 64M# InnoDB使用一個緩沖池來保存索引和原始數(shù)據, 不像MyISAM.# 這里你設置越大,你在存取表里面數(shù)據時所需要的磁盤I/O越少.# 在一個獨立使用的數(shù)據庫服務器上,你可以設置這個變量到服務器物理內存大小的80%# 不要設置過大,否則,由于物理內存的競爭可能導致操作系統(tǒng)的換頁顛簸.# 注意在32位系統(tǒng)上你每個進程可能被限制在 2-3.5G 用戶層面內存限制,# 所以不要設置的太高.innodb_write_io_threads = 4innodb_read_io_threads = 4# innodb使用后臺線程處理數(shù)據頁上的讀寫 I/O(輸入輸出)請求,根據你的 CPU 核數(shù)來更改,默認是4# 注:這兩個參數(shù)不支持動態(tài)改變,需要把該參數(shù)加入到my.cnf里，修改完后重啟MySQL服務,允許值的范圍從 1-64innodb_thread_concurrency = 0# 默認設置為 0,表示不限制并發(fā)數(shù)，這里推薦設置為0，更好去發(fā)揮CPU多核處理能力，提高并發(fā)量innodb_purge_threads = 1# InnoDB中的清除操作是一類定期回收無用數(shù)據的操作。在之前的幾個版本中，清除操作是主線程的一部分，這意味著運行時它可能會堵塞其它的數(shù)據庫操作。# 從MySQL5.5.X版本開始，該操作運行于獨立的線程中,并支持更多的并發(fā)數(shù)。用戶可通過設置innodb_purge_threads配置參數(shù)來選擇清除操作是否使用單# 獨線程,默認情況下參數(shù)設置為0(不使用單獨線程),設置為 1 時表示使用單獨的清除線程。建議為1innodb_flush_log_at_trx_commit = 2# 0：如果innodb_flush_log_at_trx_commit的值為0,log buffer每秒就會被刷寫日志文件到磁盤，提交事務的時候不做任何操作（執(zhí)行是由mysql的master thread線程來執(zhí)行的。# 主線程中每秒會將重做日志緩沖寫入磁盤的重做日志文件(REDO LOG)中。不論事務是否已經提交）默認的日志文件是ib_logfile0,ib_logfile1# 1：當設為默認值1的時候，每次提交事務的時候，都會將log buffer刷寫到日志。# 2：如果設為2,每次提交事務都會寫日志，但并不會執(zhí)行刷的操作。每秒定時會刷到日志文件。要注意的是，并不能保證100%每秒一定都會刷到磁盤，這要取決于進程的調度。# 每次事務提交的時候將數(shù)據寫入事務日志，而這里的寫入僅是調用了文件系統(tǒng)的寫入操作，而文件系統(tǒng)是有 緩存的，所以這個寫入并不能保證數(shù)據已經寫入到物理磁盤# 默認值1是為了保證完整的ACID。當然，你可以將這個配置項設為1以外的值來換取更高的性能，但是在系統(tǒng)崩潰的時候，你將會丟失1秒的數(shù)據。# 設為0的話，mysqld進程崩潰的時候，就會丟失最后1秒的事務。設為2,只有在操作系統(tǒng)崩潰或者斷電的時候才會丟失最后1秒的數(shù)據。InnoDB在做恢復的時候會忽略這個值。# 總結# 設為1當然是最安全的，但性能頁是最差的（相對其他兩個參數(shù)而言，但不是不能接受）。如果對數(shù)據一致性和完整性要求不高，完全可以設為2，如果只最求性能，例如高并發(fā)寫的日志服務器，設為0來獲得更高性能innodb_log_buffer_size = 2M# 此參數(shù)確定些日志文件所用的內存大小，以M為單位。緩沖區(qū)更大能提高性能，但意外的故障將會丟失數(shù)據。MySQL開發(fā)人員建議設置為1－8M之間innodb_log_file_size = 32M# 此參數(shù)確定數(shù)據日志文件的大小，更大的設置可以提高性能，但也會增加恢復故障數(shù)據庫所需的時間innodb_log_files_in_group = 3# 為提高性能，MySQL可以以循環(huán)方式將日志文件寫到多個文件。推薦設置為3innodb_max_dirty_pages_pct = 90# innodb主線程刷新緩存池中的數(shù)據，使臟數(shù)據比例小于90%innodb_lock_wait_timeout = 120# InnoDB事務在被回滾之前可以等待一個鎖定的超時秒數(shù)。InnoDB在它自己的鎖定表中自動檢測事務死鎖并且回滾事務。InnoDB用LOCK TABLES語句注意到鎖定設置。默認值是50秒bulk_insert_buffer_size = 8M# 批量插入緩存大小， 這個參數(shù)是針對MyISAM存儲引擎來說的。適用于在一次性插入100-1000+條記錄時， 提高效率。默認值是8M。可以針對數(shù)據量的大小，翻倍增加。myisam_sort_buffer_size = 8M# MyISAM設置恢復表之時使用的緩沖區(qū)的尺寸，當在REPAIR TABLE或用CREATE INDEX創(chuàng)建索引或ALTER TABLE過程中排序 MyISAM索引分配的緩沖區(qū)myisam_max_sort_file_size = 10G# 如果臨時文件會變得超過索引，不要使用快速排序索引方法來創(chuàng)建一個索引。注釋：這個參數(shù)以字節(jié)的形式給出myisam_repair_threads = 1# 如果該值大于1，在Repair by sorting過程中并行創(chuàng)建MyISAM表索引(每個索引在自己的線程內) interactive_timeout = 28800# 服務器關閉交互式連接前等待活動的秒數(shù)。交互式客戶端定義為在mysql_real_connect()中使用CLIENT_INTERACTIVE選項的客戶端。默認值：28800秒（8小時）wait_timeout = 28800# 服務器關閉非交互連接之前等待活動的秒數(shù)。在線程啟動時，根據全局wait_timeout值或全局interactive_timeout值初始化會話wait_timeout值，# 取決于客戶端類型(由mysql_real_connect()的連接選項CLIENT_INTERACTIVE定義)。參數(shù)默認值：28800秒（8小時）# MySQL服務器所支持的最大連接數(shù)是有上限的，因為每個連接的建立都會消耗內存，因此我們希望客戶端在連接到MySQL Server處理完相應的操作后，# 應該斷開連接并釋放占用的內存。如果你的MySQL Server有大量的閑置連接，他們不僅會白白消耗內存，而且如果連接一直在累加而不斷開，# 最終肯定會達到MySQL Server的連接上限數(shù)，這會報‘too many connections‘的錯誤。對于wait_timeout的值設定，應該根據系統(tǒng)的運行情況來判斷。# 在系統(tǒng)運行一段時間后，可以通過show processlist命令查看當前系統(tǒng)的連接狀態(tài)，如果發(fā)現(xiàn)有大量的sleep狀態(tài)的連接進程，則說明該參數(shù)設置的過大，# 可以進行適當?shù)恼{整小些。要同時設置interactive_timeout和wait_timeout才會生效。 |
