MySQL怎么給字符串字段加索引
假設(shè),你現(xiàn)在維護(hù)一個支持郵箱登錄的系統(tǒng),用戶表是這么定義的:
create table SUser( ?ID bigint unsigned primary key, ?email varchar(64), ?... ?)engine=innodb;
由于要使用郵箱登錄,所以業(yè)務(wù)代碼中一定會出現(xiàn)類似于這樣的語句:
select f1, f2 from SUser where email='xxx';
如果 email 這個字段上沒有索引,那么這個語句就只能做全表掃描。
1)那我可以在郵箱地址這個字段上面建索引嗎?
MySQL 是支持前綴索引的,可以定義字符串的一部分作為索引
2)如果創(chuàng)建索引的語句不指定前綴長度,那么會怎么樣?
索引就會包含整個字符串
3)能舉例來說明一下嗎?
alter table SUser add index index1(email); ?或 ?alter table SUser add index index2(email(6));
index1 索引里面,包含了每個記錄的整個字符串
index2 索引里面,對于每個記錄都是只取前 6 個字節(jié)
4)這兩種不同的定義在數(shù)據(jù)結(jié)構(gòu)和存儲上有什么區(qū)別呢?


明顯看出email(6) 這個索引結(jié)構(gòu)占用的空間會更小
5)email(6) 這個索引結(jié)構(gòu)有什么缺點(diǎn)嗎?
可能會增加額外的記錄掃描次數(shù)
6)下面這個語句,在這兩個索引定義下分別是怎么執(zhí)行的?
select id,name,email from SUser where email='zhangssxyz@xxx.com';
index1(即 email 整個字符串的索引結(jié)構(gòu)),執(zhí)行順序
從 index1 索引樹找到滿足索引值是’zhangssxyz@xxx.com’的這條記錄,取得 ID2 的值;
回表查到主鍵值是 ID2 的行,判斷 email 的值是正確的,將這行記錄加入結(jié)果集;
繼續(xù)在index索引樹的下一條記錄,發(fā)現(xiàn)已經(jīng)不滿足 email='zhangssxyz@xxx.com’的條件了,循環(huán)結(jié)束。
這個過程中,只需要回主鍵索引取一次數(shù)據(jù),所以系統(tǒng)認(rèn)為只掃描了一行。
index2(即 email(6) 索引結(jié)構(gòu)),執(zhí)行順序
從 index2 索引樹找到滿足索引值是’zhangs’的記錄,找到的第一個是 ID1;
到主鍵上查到主鍵值是 ID1 的行,判斷出 email 的值不是’zhangssxyz@xxx.com’,這行記錄丟棄;
取 index2 上剛剛查到的位置的下一條記錄,發(fā)現(xiàn)仍然是’zhangs’,取出 ID2,再到 ID 索引上取整行然后判斷,這次值對了,將這行記錄加入結(jié)果集;
重復(fù)上一步,直到在 idxe2 上取到的值不是’zhangs’時,循環(huán)結(jié)束。
在這個過程中,要回主鍵索引取 4 次數(shù)據(jù),也就是掃描了 4 行。
7)通過上面的對比,能得出什么結(jié)論?
使用前綴索引后,可能會導(dǎo)致查詢語句讀數(shù)據(jù)的次數(shù)變多。
8)前綴索引真的一無是處嗎?
如果我們定義的 index2 不是 email(6) 而是 email(7),那滿足前綴’zhangss’的記錄只有一個,直接就查到 ID2了,只掃描一行就結(jié)束了。
9)那么使用前綴索引有哪些注意事項(xiàng)?
長度選擇合理
10)當(dāng)要給字符串創(chuàng)建前綴索引時,我咋知道我該用多長的前綴索引呢?
統(tǒng)計索引上有多少個不同的值來判斷要使用多長的前綴。
11)怎樣統(tǒng)計索引上有多少個不同的值?
select count(distinct email) as L from SUser;
12)拿到了索引對應(yīng)的有多少個不同的值之后下一步該做什么?
依次選取不同長度的前綴來看這個值
select ? ?count(distinct left(email,4))as L4, ? ?count(distinct left(email,5))as L5, ? ?count(distinct left(email,6))as L6, ? ?count(distinct left(email,7))as L7, ?from SUser;
然后,在 L4~L7 中,找出第一個不小于 L * 95% 的值,說明通過這個索引可以找出百分之95以上的數(shù)據(jù)。
13)前綴索引對覆蓋索引的影響是什么?
下面這個 SQL 語句:
select id,email from SUser where email='zhangssxyz@xxx.com';
與前面例子中的 SQL 語句
select id,name,email from SUser where email='zhangssxyz@xxx.com';
相比,第一個語句只要求返回 id 和 email 字段。
如果使用 index1(即 email 整個字符串的索引結(jié)構(gòu))的話,查email的話就能得到ID,那就不用回表了,這個就是覆蓋索引。
用 index2(即 email(6) 索引結(jié)構(gòu))的話,就不得不回到 ID 索引再去判斷 email 字段的值。
14)那我把index2 的定義修改為 email(18) 的前綴索引不就行了?
這個18是你自己定義的,系統(tǒng)不知道18這個長度是否已經(jīng)大于我的email長度,所以它還是會回表去查一下驗(yàn)證。
總而言之:使用前綴索引就用不上覆蓋索引對查詢性能的優(yōu)化了
15)對于類似于郵箱這樣的字段來說,使用前綴索引的效果可能還不錯。但是,遇到身份證這種前綴的區(qū)分度不夠好的情況時,我們要怎么辦呢?
索引選取的要更長一些。
但是所以越長的話,占的磁盤空間更大,相同的一頁能放下的索引值就變少了,反而會影響查詢效率。
16)如果我們能夠確定業(yè)務(wù)需求里面只有按照身份證進(jìn)行等值查詢的需求,還有沒有別的處理方法呢?
既然正過來相同的多,那我就把它倒過來存。查詢時候這樣查
select field_list from t where id_card = reverse('input_id_card_string');使用 的時候用count(distinct) 方法去做個驗(yàn)證
使用 hash 字段。在表上再創(chuàng)建一個整數(shù)字段,來保存身份證的校驗(yàn)碼,同時在這個字段上創(chuàng)建索引。
alter table t add id_card_crc int unsigned, add index(id_card_crc);
每次插入新記錄的時候,都同時用 crc32() 這個函數(shù)得到校驗(yàn)碼填到這個新字段。由于校驗(yàn)碼可能存在沖突,也就是說兩個不同的身份證號通過 crc32() 函數(shù)得到的結(jié)果可能是相同的,所以你的查詢語句 where 部分要判斷 id_card 的值是否精確相同。
select field_list from t where id_card_crc=crc32('input_id_card_string') and id_card='input_id_card_string'這樣,索引的長度變成了 4 個字節(jié)(int類型),比原來小了很多
17)使用倒序存儲和使用 hash 字段這兩種方法有什么異同點(diǎn)?
相同點(diǎn):都不支持范圍查詢
倒序存儲的字段上創(chuàng)建的索引是按照倒序字符串的方式排序的,已經(jīng)沒有辦法利用索引方式查出身份證號碼在[ID_X, ID_Y]的所有市民了。同樣地,hash 字段的方式也只能支持等值查詢。
區(qū)別
從占用的額外空間來看,倒序存儲方式在主鍵索引上,不會消耗額外的存儲空間,而 hash 字段方法需要增加一個字段。當(dāng)然,倒序存儲方式使用 4 個字節(jié)的前綴長度應(yīng)該是不夠的,如果再長一點(diǎn),這個消耗跟額外這個 hash 字段也差不多抵消了。
在 CPU 消耗方面,倒序方式每次寫和讀的時候,都需要額外調(diào)用一次 reverse 函數(shù),而 hash 字段的方式需要額外調(diào)用一次 crc32() 函數(shù)。如果只從這兩個函數(shù)的計算復(fù)雜度來看的話,reverse 函數(shù)額外消耗的 CPU 資源會更小些。
從查詢效率上看,使用 hash 字段方式的查詢性能相對更穩(wěn)定一些。因?yàn)?crc32 算出來的值雖然有沖突的概率,但是概率非常小,可以認(rèn)為每次查詢的平均掃描行數(shù)接近 1。而倒序存儲方式畢竟還是用的前綴索引的方式,也就是說還是會增加掃描行數(shù)。
案例:如果你在維護(hù)一個學(xué)校的學(xué)生信息數(shù)據(jù)庫,學(xué)生登錄名的統(tǒng)一格式是”學(xué)號 @gmail.com", 而學(xué)號的規(guī)則是:十五位的數(shù)字,其中前三位是所在城市編號、第四到第六位是學(xué)校編號、第七位到第十位是入學(xué)年份、最后五位是順序編號。
18)系統(tǒng)登錄的時候都需要學(xué)生輸入登錄名和密碼,驗(yàn)證正確后才能繼續(xù)使用系統(tǒng)。就只考慮登錄驗(yàn)證這個行為的話,你會怎么設(shè)計這個登錄名的索引呢?
一個學(xué)校每年預(yù)估2萬新生,50年才100萬記錄,能節(jié)省多少空間,直接全字段索引。省去了開發(fā)轉(zhuǎn)換及局限性風(fēng)險,碰到超大量迫不得已再用后兩種辦法
實(shí)際操作上直接全字段索引就行了,一個學(xué)校數(shù)據(jù)庫的數(shù)據(jù)量和查詢壓力都不會大到哪兒去。 如果單從優(yōu)化數(shù)據(jù)表的角度: \1. 后綴@gmail可以單獨(dú)一個字段來存,或者用業(yè)務(wù)代碼來保證, \2. 城市編號和學(xué)校編號估計也不會變,也可以用業(yè)務(wù)代碼來配置 \3. 然后直接存年份和順序編號就行了,這個字段可以全字段索引
到此這篇關(guān)于MySQL怎么給字符串字段加索引的文章就介紹到這了,更多相關(guān)MySQL字符串字段加索引內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
相關(guān)文章
解決Mysql的left join無效及使用的注意事項(xiàng)說明
這篇文章主要介紹了解決Mysql的left join無效及使用的注意事項(xiàng)說明,具有很好的參考價值,希望對大家有所幫助。如有錯誤或未考慮完全的地方,望不吝賜教2021-07-07
MySQL數(shù)據(jù)表損壞的正確修復(fù)方案
修復(fù)以損壞的MySQL數(shù)據(jù)表的實(shí)際操作在實(shí)際中是我們經(jīng)常用到的,以下的文章主要是介紹正確修復(fù)以損壞的MySQL數(shù)據(jù)表的實(shí)際操作步驟,以下就是正文的介紹,希望會給你帶來一些幫助在此方面。2011-01-01
MySQL無法重啟報錯Warning: World-writable config file ‘/etc/my.cnf’
最近在維護(hù)公司服務(wù)器的時候,在關(guān)閉數(shù)據(jù)庫的命令發(fā)現(xiàn)mysql關(guān)不了了,提示錯誤為Warning: World-writable config file '/etc/my.cnf' is ignored,通過查找網(wǎng)上的資料終于解決了,現(xiàn)在將解決的方法分享給大家,同樣遇到這個問題的朋友們可以參考借鑒。2016-12-12
MySQL與JDBC之間的SQL預(yù)編譯技術(shù)講解
這篇文章主要介紹了MySQL與JDBC之間的SQL預(yù)編譯技術(shù)講解,具有很好的參考價值,希望對大家有所幫助。如有錯誤或未考慮完全的地方,望不吝賜教2022-11-11
MySQL數(shù)學(xué)函數(shù)簡明總結(jié)
這篇文章主要介紹了MySQL數(shù)學(xué)函數(shù)簡明總結(jié),本文總結(jié)了大多數(shù)常用的MySQL數(shù)學(xué)函數(shù),并給出了使用實(shí)例,需要的朋友可以參考下2014-09-09
mysql實(shí)現(xiàn)將字符串字段轉(zhuǎn)為數(shù)字排序或比大小
這篇文章主要介紹了mysql實(shí)現(xiàn)將字符串字段轉(zhuǎn)為數(shù)字排序或比大小,具有很好的參考價值,希望對大家有所幫助。如有錯誤或未考慮完全的地方,望不吝賜教2022-06-06
MySQL利用索引優(yōu)化ORDER BY排序語句的方法
這篇文章主要介紹了MySQL利用索引優(yōu)化ORDER BY排序語句的方法,幫助大家更好的理解和使用MySQL數(shù)據(jù)庫,感興趣的朋友可以了解下2020-10-10
node連接mysql數(shù)據(jù)庫遇到的問題和解決方案
這篇文章主要介紹了node連接mysql數(shù)據(jù)庫遇到的問題和解決方案,本文給大家介紹的非常詳細(xì),對大家的學(xué)習(xí)或工作具有一定的參考借鑒價值,需要的朋友可以參考下2020-10-10
MySQL之information_schema數(shù)據(jù)庫詳細(xì)講解
這篇文章主要介紹了MySQL之information_schema數(shù)據(jù)庫詳細(xì)講解,本篇文章通過簡要的案例,講解了該項(xiàng)技術(shù)的了解與使用,以下就是詳細(xì)內(nèi)容,需要的朋友可以參考下2021-08-08

