明輝手游網(wǎng)中心:是一個免費提供流行視頻軟件教程、在線學(xué)習(xí)分享的學(xué)習(xí)平臺!

mysql千萬級數(shù)據(jù)分頁查詢優(yōu)化性能_Mysql

[摘要]mysql數(shù)據(jù)量大時使用limit分頁,隨著頁碼的增大,查詢效率越低下。本文給大家分享的是作者在使用mysql進行千萬級數(shù)據(jù)量分頁查詢的時候進行性能優(yōu)化的方法,非常不錯的一篇文章,希望能幫助到大家。...
mysql數(shù)據(jù)量大時使用limit分頁,隨著頁碼的增大,查詢效率越低下。本文給大家分享的是作者在使用mysql進行千萬級數(shù)據(jù)量分頁查詢的時候進行性能優(yōu)化的方法,非常不錯的一篇文章,希望能幫助到大家。

實驗

1.直接使用用limit start, count分頁語句:

select * from order limit start, count

當(dāng)起始頁較小時,查詢沒有性能問題,我們分別看下從10, 100, 1000, 10000開始分頁的執(zhí)行時間(每頁取20條), 如下:

select * from order limit 10, 20 0.016秒

select * from order limit 100, 20 0.016秒

select * from order limit 1000, 20 0.047秒

select * from order limit 10000, 20 0.094秒

我們已經(jīng)看出隨著起始記錄的增加,時間也隨著增大, 這說明分頁語句limit跟起始頁碼是有很大關(guān)系的,那么我們把起始記錄改為40w看下

select * from order limit 400000, 20 3.229秒

再看我們?nèi)∽詈笠豁撚涗浀臅r間

select * from order limit 800000, 20 37.44秒

顯然這種時間是無法忍受的。

從中我們也能總結(jié)出兩件事情:

1)limit語句的查詢時間與起始記錄的位置成正比

2)mysql的limit語句是很方便,但是對記錄很多的表并不適合直接使用。

2.對limit分頁問題的性能優(yōu)化方法

利用表的覆蓋索引來加速分頁查詢

我們都知道,利用了索引查詢的語句中如果只包含了那個索引列(覆蓋索引),那么這種情況會查詢很快。

因為利用索引查找有優(yōu)化算法,且數(shù)據(jù)就在查詢索引上面,不用再去找相關(guān)的數(shù)據(jù)地址了,這樣節(jié)省了很多時間。另外Mysql中也有相關(guān)的索引緩存,在并發(fā)高的時候利用緩存就效果更好了。

在我們的例子中,我們知道id字段是主鍵,自然就包含了默認的主鍵索引,F(xiàn)在讓我們看看利用覆蓋索引的查詢效果如何:

這次我們之間查詢最后一頁的數(shù)據(jù)(利用覆蓋索引,只包含id列),如下:

select id from order limit 800000, 20 0.2秒

相對于查詢了所有列的37.44秒,提升了大概100多倍的速度

那么如果我們也要查詢所有列,有兩種方法,一種是id>=的形式,另一種就是利用join,看下實際情況:

SELECT * FROM order WHERE ID > =(select id from order limit 800000, 1) limit 20

查詢時間為0.2秒,簡直是一個質(zhì)的飛躍啊,哈哈

另一種寫法

SELECT * FROM order a JOIN (select id from order limit 800000, 20) b ON a.ID = b.id

查詢時間也很短。

大家學(xué)會了嗎?趕緊動手嘗試一下吧。

相關(guān)推薦:

mysql千萬級數(shù)據(jù)查詢

mysql千萬級的count統(tǒng)計對比_MySQL

MySQL 百萬級分頁優(yōu)化(Mysql千萬級快速分頁)_MySQL

以上就是mysql千萬級數(shù)據(jù)分頁查詢性能優(yōu)化_Mysql的詳細內(nèi)容,更多請關(guān)注php中文網(wǎng)其它相關(guān)文章!


學(xué)習(xí)教程快速掌握從入門到精通的SQL知識。