- N +

sqlserver分頁查詢sql語句(mysql的三種分頁方法)

大家好,感謝邀請(qǐng),今天來為大家分享一下sqlserver分頁查詢sql語句的問題,以及和mysql的三種分頁方法的一些困惑,大家要是還不太明白的話,也沒有關(guān)系,因?yàn)榻酉聛韺榇蠹曳窒恚M梢詭椭酱蠹遥鉀Q大家的問題,下面就開始吧!

如何使用mybatis實(shí)現(xiàn)分頁

1、親Mybatis是自己寫Sql語句啊,和Hibernate不一樣。

2、如何知道上面的,你還要知道MySql有一個(gè)分頁語句叫l(wèi)imit,如:limit(1,10);前面一個(gè)參數(shù)是起始未知,后面一個(gè)是查詢多少個(gè)。

3、Oracle的分頁方法是嵌套子查詢,需要用到rownum這個(gè)屬性SqlServer是Top。分頁例子:Oracleselect*from(selectemp.*,rownumrnfromempwhererownum<9)wherern>3;MySqlselect*fromemplimitstartIndex,maxNum

MySQL如何優(yōu)化大分頁查詢

很多應(yīng)用往往只展示最新或最熱門的幾條記錄,但為了舊記錄仍然可訪問,所以就需要個(gè)分頁的導(dǎo)航欄。然而,如何通過MySQL更好的實(shí)現(xiàn)分頁,始終是比較令人頭疼的問題。雖然沒有拿來就能用的解決辦法,但了解數(shù)據(jù)庫的底層或多或少有助于優(yōu)化分頁查詢。

我們先從一個(gè)常用但性能很差的查詢來看一看。

SELECT*

FROMcity

ORDERBYidDESC

LIMIT0,15

這個(gè)查詢耗時(shí)0.00sec。So,這個(gè)查詢有什么問題呢?實(shí)際上,這個(gè)查詢語句和參數(shù)都沒有問題,因?yàn)樗玫搅讼旅姹淼闹麈I,而且只讀取15條記錄。

CREATETABLEcity(

idint(10)unsignedNOTNULLAUTO_INCREMENT,

cityvarchar(128)NOTNULL,

PRIMARYKEY(id)

)ENGINE=InnoDB;

真正的問題在于offset(分頁偏移量)很大的時(shí)候,像下面這樣:

SELECT*

FROMcity

ORDERBYidDESC

LIMIT100000,15;

上面的查詢?cè)谟?M行記錄時(shí)需要0.22sec,通過EXPLAIN查看SQL的執(zhí)行計(jì)劃可以發(fā)現(xiàn)該SQL檢索了100015行,但最后只需要15行。大的分頁偏移量會(huì)增加使用的數(shù)據(jù),MySQL會(huì)將大量最終不會(huì)使用的數(shù)據(jù)加載到內(nèi)存中。就算我們假設(shè)大部分網(wǎng)站的用戶只訪問前幾頁數(shù)據(jù),但少量的大的分頁偏移量的請(qǐng)求也會(huì)對(duì)整個(gè)系統(tǒng)造成危害。Facebook意識(shí)到了這一點(diǎn),但Facebook并沒有為了每秒可以處理更多的請(qǐng)求而去優(yōu)化數(shù)據(jù)庫,而是將重心放在將請(qǐng)求響應(yīng)時(shí)間的方差變小。

對(duì)于分頁請(qǐng)求,還有一個(gè)信息也很重要,就是總共的記錄數(shù)。我們可以通過下面的查詢很容易的獲取總的記錄數(shù)。

SELECTCOUNT(*)

FROMcity;

然而,上面的SQL在采用InnoDB為存儲(chǔ)引擎時(shí)需要耗費(fèi)9.28sec。一個(gè)不正確的優(yōu)化是采用SQL_CALC_FOUND_ROWS,SQL_CALC_FOUND_ROWS可以在能夠在分頁查詢時(shí)事先準(zhǔn)備好符合條件的記錄數(shù),隨后只要執(zhí)行一句selectFOUND_ROWS();就能獲得總記錄數(shù)。但是在大多數(shù)情況下,查詢語句簡短并不意味著性能的提高。不幸的是,這種分頁查詢方式在許多主流框架中都有用到,下面看看這個(gè)語句的查詢性能。

SELECTSQL_CALC_FOUND_ROWS*

FROMcity

ORDERBYidDESC

LIMIT100000,15;

這個(gè)語句耗時(shí)20.02sec,是上一個(gè)的兩倍。事實(shí)證明使用SQL_CALC_FOUND_ROWS做分頁是很糟糕的想法。

下面來看看到底如何優(yōu)化。文章分為兩部分,第一部分是如何獲取記錄的總數(shù)目,第二部分是獲取真正的記錄。

高效的計(jì)算行數(shù)

如果采用的引擎是MyISAM,可以直接執(zhí)行COUNT(*)去獲取行數(shù)即可。相似的,在堆表中也會(huì)將行數(shù)存儲(chǔ)到表的元信息中。但如果引擎是InnoDB情況就會(huì)復(fù)雜一些,因?yàn)镮nnoDB不保存表的具體行數(shù)。

我們可以將行數(shù)緩存起來,然后可以通過一個(gè)守護(hù)進(jìn)程定期更新或者用戶的某些操作導(dǎo)致緩存失效時(shí),執(zhí)行下面的語句:

SELECTCOUNT(*)

FROMcity

USEINDEX(PRIMARY);

獲取記錄

下面進(jìn)入這篇文章最重要的部分,獲取分頁要展示的記錄。上面已經(jīng)說過了,大的偏移量會(huì)影響性能,所以我們要重寫查詢語句。為了演示,我們創(chuàng)建一個(gè)新的表“news”,按照時(shí)事性排序(最新發(fā)布的在最前面),實(shí)現(xiàn)一個(gè)高性能的分頁。為了簡單,我們就假設(shè)最新發(fā)布的新聞的Id也是最大的。

CREATETABLEnews(

idINTUNSIGNEDPRIMARYKEYAUTO_INCREMENT,

titleVARCHAR(128)NOTNULL

)ENGINE=InnoDB;

一個(gè)比較高效的方式是基于用戶展示的最后一個(gè)新聞Id。查詢下一頁的語句如下,需要傳入當(dāng)前頁面展示的最后一個(gè)Id。

SELECT*

FROMnewsWHEREid<$last_id

ORDERBYidDESC

LIMIT$perpage

查詢上一頁的語句類似,只不過需要傳入當(dāng)前頁的第一個(gè)Id,并且要逆序。

SELECT*

FROMnewsWHEREid>$last_id

ORDERBYidASC

LIMIT$perpage

上面的查詢方式適合實(shí)現(xiàn)簡易的分頁,即不顯示具體的頁數(shù)導(dǎo)航,只顯示“上一頁”和“下一頁”,例如博客中頁腳顯示“上一頁”,“下一頁”的按鈕。但如果要實(shí)現(xiàn)真正的頁面導(dǎo)航還是很難的,下面看看另一種方式。

SELECTid

FROM(

SELECTid,((@cnt:=@cnt+1)+$perpage-1)%$perpagecnt

FROMnews

JOIN(SELECT@cnt:=0)T

WHEREid<$last_id

ORDERBYidDESC

LIMIT$perpage*$buttons

)C

WHEREcnt=0;

通過上面的語句可以為每一個(gè)分頁的按鈕計(jì)算出一個(gè)offset對(duì)應(yīng)的id。這種方法還有一個(gè)好處。假設(shè),網(wǎng)站上正在發(fā)布一片新的文章,那么所有文章的位置都會(huì)往后移一位,所以如果用戶在發(fā)布文章時(shí)換頁,那么他會(huì)看見一篇文章兩次。如果固定了每個(gè)按鈕的offsetId,這個(gè)問題就迎刃而解了。MarkCallaghan發(fā)表過一篇類似的博客,利用了組合索引和兩個(gè)位置變量,但是基本思想是一致的。

如果表中的記錄很少被刪除、修改,還可以將記錄對(duì)應(yīng)的頁碼存儲(chǔ)到表中,并在該列上創(chuàng)建合適的索引。采用這種方式,當(dāng)新增一個(gè)記錄的時(shí)候,需要執(zhí)行下面的查詢重新生成對(duì)應(yīng)的頁號(hào)。

SETp:=0;

UPDATEnewsSETpage=CEIL((p:=p+1)/$perpage)ORDERBYidDESC;

當(dāng)然,也可以新增一個(gè)專用于分頁的表,可以用個(gè)后臺(tái)程序來維護(hù)。

UPDATEpaginationT

JOIN(

SELECTid,CEIL((p:=p+1)/$perpage)page

FROMnews

ORDERBYid

)C

ONC.id=T.id

SETT.page=C.page;

現(xiàn)在想獲取任意一頁的元素就很簡單了:

SELECT*

FROMnewsA

JOINpaginationBONA.id=B.ID

WHEREpage=$offset;

還有另外一種與上種方法比較相似的方法來做分頁,這種方式比較試用于數(shù)據(jù)集相對(duì)小,并且沒有可用的索引的情況下—比如處理搜索結(jié)果時(shí)。在一個(gè)普通的服務(wù)器上執(zhí)行下面的查詢,當(dāng)有2M條記錄時(shí),要耗費(fèi)2sec左右。這種方式比較簡單,創(chuàng)建一個(gè)用來存儲(chǔ)所有Id的臨時(shí)表即可(這也是最耗費(fèi)性能的地方)。

CREATETEMPORARYTABLE_tmp(KEYSORT(random))

SELECTid,FLOOR(RAND()*0x8000000)random

FROMcity;

ALTERTABLE_tmpADDOFFSETINTUNSIGNEDPRIMARYKEYAUTO_INCREMENT,DROPINDEXSORT,ORDERBYrandom;

接下來就可以向下面一樣執(zhí)行分頁查詢了。

SELECT*

FROM_tmp

WHEREOFFSET>=$offset

ORDERBYOFFSET

LIMIT$perpage;

簡單來說,對(duì)于分頁的優(yōu)化就是。。。避免數(shù)據(jù)量大時(shí)掃描過多的記錄。

java數(shù)據(jù)庫學(xué)習(xí)sql Server好還是my sql好為什么

從編程語言的層面來說,選擇什么數(shù)據(jù)庫并沒有什么明顯的區(qū)別,數(shù)據(jù)庫的選擇更應(yīng)該考慮業(yè)務(wù)類型和業(yè)務(wù)規(guī)模。如果從學(xué)習(xí)的角度出發(fā),那么Java數(shù)據(jù)庫最好選擇MySql數(shù)據(jù)庫,原因有以下幾點(diǎn):

第一,Java與MySql同屬于Oracle公司,在整合程度上MySql更適合Java語言。早在多年前Sun公司還沒有被Oracle收購的時(shí)候,Sun公司為了打造Java的生態(tài)圈而花費(fèi)巨資收購了MySql數(shù)據(jù)庫,所以MySql與Java的整合是從設(shè)計(jì)層面就開始考慮的問題,這是一個(gè)天然的優(yōu)勢(shì)。

第二,MySql數(shù)據(jù)庫應(yīng)用比較廣泛,尤其是在Java開發(fā)體系中(Web開發(fā)領(lǐng)域)。雖然對(duì)于編程語言來說,使用何種數(shù)據(jù)庫的影響并不大,但是在實(shí)現(xiàn)層面,不同數(shù)據(jù)庫還是有較大的區(qū)別。目前大量的Java平臺(tái)都采用MySql數(shù)據(jù)庫,這說明使用MySql有很多成熟的方案。目前,很多云計(jì)算平臺(tái)自身就整合了MySql的解決方案,使用起來非常方便,我?guī)У囊苿?dòng)互聯(lián)團(tuán)隊(duì)就是采用了MySql的云計(jì)算解決方案。

第三,MySql是開源的。MySql的開源特性不僅讓使用者節(jié)省了大量的費(fèi)用,同時(shí)也可以針對(duì)MySql做深層次的性能優(yōu)化,目前很多大型電商平臺(tái)都會(huì)對(duì)MySql做深度優(yōu)化以滿足自身的業(yè)務(wù)需求。

MySql簡單易用,學(xué)習(xí)起來也非常方便,所以建議Java程序員從學(xué)習(xí)MySql開始。

我使用Java語言的時(shí)間比較久,我在頭條上也寫了關(guān)于Java操作數(shù)據(jù)庫的文章,感興趣的朋友可以關(guān)注我的頭條號(hào),并查看相關(guān)文章。

如果有Java編程方面的問題,也可以咨詢我。

謝謝!

mysql數(shù)據(jù)庫,分表后,怎么進(jìn)行分頁查詢Mysql分庫分表方案

Mysql分庫分表方案

1.為什么要分表:

當(dāng)一張表的數(shù)據(jù)達(dá)到幾千萬時(shí),你查詢一次所花的時(shí)間會(huì)變多,如果有聯(lián)合查詢的話,我想有可能會(huì)死在那兒了。分表的目的就在于此,減小數(shù)據(jù)庫的負(fù)擔(dān),縮短查詢時(shí)間。

mysql中有一種機(jī)制是表鎖定和行鎖定,是為了保證數(shù)據(jù)的完整性。表鎖定表示你們都不能對(duì)這張表進(jìn)行操作,必須等我對(duì)表操作完才行。行鎖定也一樣,別的sql必須等我對(duì)這條數(shù)據(jù)操作完了,才能對(duì)這條數(shù)據(jù)進(jìn)行操作。

2.mysqlproxy:amoeba

做mysql集群,利用amoeba。

從上層的java程序來講,不需要知道主服務(wù)器和從服務(wù)器的來源,即主從數(shù)據(jù)庫服務(wù)器對(duì)于上層來講是透明的。可以通過amoeba來配置。

3.大數(shù)據(jù)量并且訪問頻繁的表,將其分為若干個(gè)表

比如對(duì)于某網(wǎng)站平臺(tái)的數(shù)據(jù)庫表-公司表,數(shù)據(jù)量很大,這種能預(yù)估出來的大數(shù)據(jù)量表,我們就事先分出個(gè)N個(gè)表,這個(gè)N是多少,根據(jù)實(shí)際情況而定。

某網(wǎng)站現(xiàn)在的數(shù)據(jù)量至多是5000萬條,可以設(shè)計(jì)每張表容納的數(shù)據(jù)量是500萬條,也就是拆分成10張表,

那么如何判斷某張表的數(shù)據(jù)是否容量已滿呢?可以在程序段對(duì)于要新增數(shù)據(jù)的表,在插入前先做統(tǒng)計(jì)表記錄數(shù)量的操作,當(dāng)<500萬條數(shù)據(jù),就直接插入,當(dāng)已經(jīng)到達(dá)閥值,可以在程序段新創(chuàng)建數(shù)據(jù)庫表(或者已經(jīng)事先創(chuàng)建好),再執(zhí)行插入操作。

4.利用merge存儲(chǔ)引擎來實(shí)現(xiàn)分表

如果要把已有的大數(shù)據(jù)量表分開比較痛苦,最痛苦的事就是改代碼,因?yàn)槌绦蚶锩娴膕ql語句已經(jīng)寫好了。用merge存儲(chǔ)引擎來實(shí)現(xiàn)分表,這種方法比較適合.

如何通過優(yōu)化sql語句提高數(shù)據(jù)庫查詢效率

謝邀!

通過SQL調(diào)優(yōu)提高查詢性能最重要的就是對(duì)索引的使用,下面是對(duì)索引使用的一些總結(jié),希望對(duì)你有所幫助。

MySQL索引對(duì)數(shù)據(jù)檢索的性能至關(guān)重要,盲目的增加索引不僅不能帶來性能的提升,反而會(huì)消耗更多的額外資源。

索引是用于快速查找記錄的一種數(shù)據(jù)結(jié)構(gòu)。索引就像是數(shù)據(jù)庫中數(shù)據(jù)的目錄,數(shù)據(jù)庫在查詢時(shí),首先在索引中找到匹配的值,然后根據(jù)這個(gè)匹配值找到對(duì)應(yīng)的數(shù)據(jù)行。

聚簇索引的順序就是數(shù)據(jù)的物理存儲(chǔ)順序,索引中數(shù)據(jù)域存儲(chǔ)的就是實(shí)際的數(shù)據(jù),一個(gè)表最多只能有一個(gè)聚簇索引,適用于查詢多行數(shù)據(jù),不適用于頻繁修改的列,一般在主鍵上創(chuàng)建。

非聚簇索引順序與數(shù)據(jù)物理排列順序無關(guān),索引中存儲(chǔ)的內(nèi)容為實(shí)際數(shù)據(jù)的地址,適應(yīng)于查詢單行數(shù)據(jù)。

普通索引,即平時(shí)創(chuàng)建的普通索引。

唯一索引,索引所在的列或列組合的值是全表唯一的。

全文索引,MySQL從3.23.23版開始支持全文索引,它查找的是文中的關(guān)鍵詞,而不是直接比較索引中的值。

單列索引,在單列上創(chuàng)建的索引。

組合索引,在多個(gè)列上創(chuàng)建的索引。

最左前綴查找:where子句中有a、b、c三個(gè)查詢條件,創(chuàng)建一個(gè)組合索引abc(a,b,c),最左前綴的概念是說以組合索引最左邊的列a組合成的查詢條件,如(a,b,c)、(a,b)、(a,c),這三種情況的查詢條件都會(huì)使用abc索引,和where子句中a、b、c出現(xiàn)的順序沒關(guān)系,可以是wherec=?andb=?anda=?,但(b,c)組合不會(huì)使用索引,即wherec=?andb=?。

哪些列適合創(chuàng)建索引:

1.經(jīng)常作為查詢條件的列;

2.經(jīng)常作為排序條件的列;

3.經(jīng)常作為join條件的列;

4.經(jīng)常被查詢的列。

哪些列不適合創(chuàng)建索引:

1.數(shù)據(jù)頻繁被修改的列,數(shù)據(jù)被修改,索引需要做相應(yīng)的修改,消耗資源;2.區(qū)分度不是很高的列,如性別,列值重復(fù)性太大,索引效果不是很明顯;3.不是經(jīng)常被作為查詢條件、排序條件、連接條件的列。

經(jīng)驗(yàn)總結(jié):

1.列上進(jìn)行函數(shù)計(jì)算將不會(huì)使用索引;

2.對(duì)于創(chuàng)建索引的列,避免存儲(chǔ)NULL,NULL會(huì)使索引更加復(fù)雜、效率變低,可以使用NOTNULL進(jìn)行約束;

3.對(duì)于模糊查詢like'%abc%',將不會(huì)使用索引,而like'abc%'將會(huì)使用索引;

4.對(duì)于notin、notexists、!=等負(fù)向查詢將不會(huì)使用索引;

5.每次查詢只使用一個(gè)索引,如果where條件使用了索引,orderby將不再使用索引;

6.對(duì)于where子句中有多個(gè)查詢條件的,單列索引的效率不如復(fù)合索引,因?yàn)椴樵兠看沃荒苁褂靡粋€(gè)索引;

7.MySQL只對(duì)以下操作符才使用索引:<、<=、=、>、>=、between、in,但是需要注意in的范圍值不要太多;

8.unionall可以使用索引,但本身效率不是很高,不建議使用;

9.列上進(jìn)行類型轉(zhuǎn)換的將不會(huì)使用索引;

10.老版本MySQL對(duì)OR條件不使用索引,新版本才支持,不建議使用OR。

關(guān)于索引的實(shí)戰(zhàn)經(jīng)驗(yàn)總結(jié)后續(xù)還會(huì)不斷更新,可以關(guān)注我的頭條號(hào)!

如果你還想了解更多這方面的信息,記得收藏關(guān)注本站。

返回列表
上一篇:
下一篇: