MySQL 查詢中的分頁(yè)思路的優(yōu)化
發(fā)表時(shí)間:2023-08-13 來(lái)源:明輝站整理相關(guān)軟件相關(guān)文章人氣:
[摘要]作者:steeven 似乎討論分頁(yè)的人很少,難道大家都沉迷于limit m,n?在有索引的情況下,limit m,n速度足夠,可是在復(fù)雜條件搜索時(shí),where somthing order b...
作者:steeven
似乎討論分頁(yè)的人很少,難道大家都沉迷于limit m,n?
在有索引的情況下,limit m,n速度足夠,可是在復(fù)雜條件搜索時(shí),
where somthing order by somefield+somefield
mysql會(huì)搜遍數(shù)據(jù)庫(kù),找出“所有”符合條件的記錄,然后取出m,n條記錄。
如果你的數(shù)據(jù)量有幾十萬(wàn)條,用戶又搜索一些很通俗的詞,
然后要依次讀最后幾頁(yè)重溫舊夢(mèng)。。。mysql該很悲壯的不停操作硬盤。
所以,可以試著讓mysql也存儲(chǔ)分頁(yè),當(dāng)然要程序配合。
(這里只是提出一個(gè)設(shè)想,歡迎大家一起討論)
ASP的分頁(yè):在ASP系統(tǒng)中有Recordset對(duì)象來(lái)實(shí)現(xiàn)分頁(yè),但是大量數(shù)據(jù)放在內(nèi)存中,而且不知道什么時(shí)候才失效(請(qǐng)ASP高手
指點(diǎn)).
SQL數(shù)據(jù)庫(kù)分頁(yè):用存儲(chǔ)過(guò)程+游標(biāo)方式分頁(yè),具體實(shí)現(xiàn)原理不是很清楚,設(shè)想如果用一次查詢就得到需要的結(jié)果,或者是
id集,需要后續(xù)頁(yè)時(shí)只要按照結(jié)果中的IDs讀出相關(guān)記錄。這樣只要很小的空間保留本次查詢的所有IDs. (SQL中的查詢結(jié)
果不知道怎樣清楚過(guò)期垃圾?)
這樣,可以讓mysql模擬存儲(chǔ)分頁(yè)機(jī)制:
1. select id from $table where $condition order by $field limit $max_pages*$count;
查詢符合條件的IDs.
限定最大符合條件的記錄數(shù)量,也可以不加。
2. 因?yàn)閜hp在執(zhí)行結(jié)束后所有變量都要lost,所以可以考慮:
方案a. 在mysql建立臨時(shí)表,查詢結(jié)果用一個(gè)時(shí)間或隨機(jī)數(shù)作為唯一標(biāo)志插入。
其中建立page1~pagen個(gè)字段,每個(gè)字段保存該頁(yè)中需要的ids, 這樣一個(gè)id對(duì)一條記錄.
方案b. 如果打開(kāi)session,也可以放在session中保存,實(shí)際上是放在文件中保存。
建立一個(gè)$IDs數(shù)組,$IDs[1]~$IDs[$max_pages]. 考慮到有時(shí)候用戶會(huì)開(kāi)幾個(gè)
窗口同時(shí)查詢,要為$ids做一個(gè)唯一標(biāo)志,避免查詢結(jié)果相互覆蓋。二維數(shù)組
和$$var都是好辦法。
3. 在每頁(yè)頁(yè)的請(qǐng)求中,直接找到對(duì)應(yīng)的IDs,中間以","間隔:
select * from $table where id in ($ids); 速度絕對(duì)快
4. 收尾要考慮查詢結(jié)果的自動(dòng)清除,可以設(shè)置定時(shí)或者按比例隨機(jī)清楚。如果用mysql臨時(shí)表要加上一個(gè)時(shí)間標(biāo)志字段,
session中要加入$IDs["time"]=time(); 在一定時(shí)間以后不操作視為過(guò)期數(shù)據(jù)。
5. 如果要優(yōu)化,可以考慮用把1和2.a中的語(yǔ)句合并成select ...... into ....
Note:
1.以上只是針對(duì)mysql的修補(bǔ)方案,希望mysql哪天能把這些功能加進(jìn)去
2.其它數(shù)據(jù)庫(kù)也可以套用。
3.如果其它數(shù)據(jù)庫(kù)還有更先進(jìn)的分頁(yè)方式,請(qǐng)告訴我或mailto: steeven@kali.com.cn
4.如果真的有很多數(shù)據(jù)要查詢,還是和mysql再見(jiàn)吧,sql,oracle都提供了更先進(jìn)的關(guān)鍵詞索引查詢。
精益求精,以上只是拋磚引玉,歡迎共同探討分頁(yè)問(wèn)題。(也可關(guān)于其它數(shù)據(jù)庫(kù))
希望有一天能把各種分頁(yè)方式整理出來(lái)供新手參考。