国产探花免费观看_亚洲丰满少妇自慰呻吟_97日韩有码在线_资源在线日韩欧美_一区二区精品毛片,辰东完美世界有声小说,欢乐颂第一季,yy玄幻小说排行榜完本

首頁 > 數據庫 > MySQL > 正文

MySQL高效分頁,子查詢分頁實例

2024-07-24 12:37:39
字體:
來源:轉載
供稿:網友

mysql分頁多半是使用limit s,e這種進行查詢數據了,這種辦法也是一種不錯的mysql分頁辦法,但是如果你要在千萬級的數據量前和它,就要撐握技巧了哈.

一般MYSQL最基本的分頁方式,代碼如下:

select * from content order by id desc limit 0, 10

在中小數據量的情況下,這樣的SQL足夠用了,唯一需要注意的問題就是確保使用了索引,隨著數據量的增加,頁數會越來越多,查看后幾頁的SQL就可能類似,代碼如下:

select * from content order by id desc limit 10000, 10

一言以蔽之,就是越往后分頁,LIMIT語句的偏移量就會越大,速度也會明顯變慢.

首先看一下分頁的基本原理,代碼如下:

  1. mysql> explain SELECT * FROM message ORDER BY id DESC LIMIT 10000, 20G 
  2. ***************** 1. row ************** 
  3. id: 1 
  4. select_type: SIMPLE 
  5. table: message 
  6. type: index 
  7. possible_keys: NULL 
  8. keyPRIMARY 
  9. key_len: 4 
  10. ref: NULL 
  11. rows: 10020 
  12. Extra: 
  13. 1 row in set (0.00 sec) 

limit 10000,20的意思掃描滿足條件的10020行,扔掉前面的10000行,返回最后的20行,問題就在這里,如果是limit 100000,100,需要掃描100100行,在一個高并發的應用里,每次查詢需要掃描超過10W行,性能肯定大打折扣。文中還提到limit n性能是沒問題的,因為只掃描n行。

文中提到一種”clue”的做法,給翻頁提供一些”線索”,比如還是SELECT * FROM message ORDER BY id DESC,按id降序分頁,每頁20條,當前是第10頁,當前頁條目id最大的是9527,最小的是9500,如果我們只提供”上一頁”、”下一頁”這樣的跳轉(不提供到第N頁的跳轉),那么在處理”上一頁”的時候SQL語句可以是,代碼如下:

SELECT * FROM message WHERE id > 9527 ORDER BY id ASC LIMIT 20;

處理”下一頁”的時候SQL語句可以是:

SELECT * FROM message WHERE id < 9500 ORDER BY id DESC LIMIT 20;

不管翻多少頁,每次查詢只掃描20行.

缺點是只能提供”上一頁”、”下一頁”的鏈接形式,但是我們的產品經理非常喜歡”<上一頁 1 2 3 4 5 6 7 8 9 下一頁>”這樣的鏈接方式,怎么辦呢?

如果LIMIT m,n不可避免的話,要優化效率,只有盡可能的讓m小一下,我們擴展前面的”clue”做法,還是SELECT * FROM message ORDER BY id DESC,按id降序分頁,每頁20條,當前是第10頁,當前頁條目id最大的是9527,最小的是9500,比如要跳到第8頁,我看的SQL語句可以這樣寫:

SELECT * FROM message WHERE id > 9527 ORDER BY id ASC LIMIT 20,20;

跳轉到第13頁:

SELECT * FROM message WHERE id < 9500 ORDER BY id DESC LIMIT 40,20;

原理還是一樣,記錄住當前頁id的最大值和最小值,計算跳轉頁面和當前頁相對偏移,由于頁面相近,這個偏移量不會很大,這樣的話,值相對較小,大大減少掃描的行數,其實傳統的limit m,n,相對的偏移一直是第一頁,這樣的話越翻到后面,效率越差,而上面給出的方法就沒有這樣的問題.

注意SQL語句里面的ASC和DESC,如果是ASC取出來的結果,顯示的時候記得倒置一下。

此時,我們可以通過2種方式:

一,子查詢的分頁方式來提高分頁效率,飄易用的SQL語句如下:

  1. SELECT * FROM `content` WHERE id <=  
  2. (SELECT id FROM `content` ORDER BY id desc LIMIT ".($page-1)*$pagesize.", 1) ORDER BY id desc LIMIT $pagesize 

為什么會這樣呢?因為子查詢是在索引上完成的,而普通的查詢時在數據文件上完成的,通常來說,索引文件要比數據文件小得多,所以操作起來也會更有效率,(via)通過explain SQL語句發現,子查詢使用了索引,代碼如下:

  1. id select_type table type possible_keys key key_len ref rows Extra 
  2. PRIMARY content range PRIMARY PRIMARY 4 NULL 6264 Using where 
  3. 2 SUBQUERY content index NULL PRIMARY 4 NULL 27085 Using index 

經過飄易的實測,使用子查詢的分頁方式的效率比純LIMIT提高了14-20倍.

二,JOIN分頁方式,代碼如下:

  1. SELECT * FROM `content` AS t1  
  2. JOIN (SELECT id FROM `content` ORDER BY id desc LIMIT ".($page-1)*$pagesize.", 1) AS t2  //Vevb.com
  3. WHERE t1.id <= t2.id ORDER BY t1.id desc LIMIT $pagesize;  

經過我的測試,join分頁和子查詢分頁的效率基本在一個等級上,消耗的時間也基本一致,explain SQL語句,代碼如下:

  1. id select_type table type possible_keys key key_len ref rows Extra 
  2. PRIMARY <derived2> system NULL NULL NULL NULL 1   
  3. PRIMARY t1 range PRIMARY PRIMARY 4 NULL 6264 Using where 
  4. 2 DERIVED content index NULL PRIMARY 4 NULL 27085 Using index 

發表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發表
主站蜘蛛池模板: 黄骅市| 涿州市| 同心县| 治多县| 怀集县| 东至县| 奉新县| 车险| 辰溪县| 玉山县| 泰来县| 烟台市| 阳谷县| 闽清县| 应城市| 新建县| 深泽县| 和政县| 孝感市| 双江| 萨嘎县| 江都市| 鹿邑县| 黄浦区| 维西| 沧州市| 黑山县| 普宁市| 得荣县| 岳池县| 化州市| 岳阳市| 大庆市| 渭南市| 孟州市| 永济市| 泸溪县| 海南省| 南岸区| 油尖旺区| 武义县|