日韩av黄I国产麻豆传媒I国产91av视频在线观看I日韩一区二区三区在线看I美女国产在线I麻豆视频国产在线观看I成人黄色短片

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 >

mysql索引 钱缀_mysql字符串前缀索引

發(fā)布時間:2025/4/5 62 豆豆
生活随笔 收集整理的這篇文章主要介紹了 mysql索引 钱缀_mysql字符串前缀索引 小編覺得挺不錯的,現(xiàn)在分享給大家,幫大家做個參考.

比如,這兩個在 email 字段上創(chuàng)建索引的語句:

mysql> alter table SUser add index index1(email);

mysql> alter table SUser add index index2(email(6));

第一個語句創(chuàng)建的 index1 索引里面,包含了每個記錄的整個字符串;而第二個語句創(chuàng)建的 index2 索引里面,對于每個記錄都是只取前 6 個字節(jié)。

那么,這兩種不同的定義在數(shù)據(jù)結(jié)構(gòu)和存儲上有什么區(qū)別呢?

?圖1: email索引結(jié)構(gòu)

?圖2: email(6)索引結(jié)構(gòu)

從圖中你可以看到,由于 email(6) 這個索引結(jié)構(gòu)中每個郵箱字段都只取前 6 個字節(jié)(即:zhangs),所以占用的空間會更小,這就是使用前綴索引的優(yōu)勢。

但,這同時帶來的損失是,可能會增加額外的記錄掃描次數(shù)。

接下來,我們再看看下面這個語句,在這兩個索引定義下分別是怎么執(zhí)行的。

select id,name,email from SUser where email='zhangssxyz@xxx.com';

如果使用的是 index1(即 email 整個字符串的索引結(jié)構(gòu)),執(zhí)行順序是這樣的:

從 index1 索引樹找到滿足索引值是’zhangssxyz@xxx.com’的這條記錄,取得 ID2 的值;

到主鍵上查到主鍵值是 ID2 的行,判斷 email 的值是正確的,將這行記錄加入結(jié)果集;

取 index1 索引樹上剛剛查到的位置的下一條記錄,發(fā)現(xiàn)已經(jīng)不滿足 email='zhangssxyz@xxx.com’的條件了,循環(huán)結(jié)束。

這個過程中,只需要回主鍵索引取一次數(shù)據(jù),所以系統(tǒng)認為只掃描了一行。

如果使用的是 index2(即 email(6) 索引結(jié)構(gòu)),執(zhí)行順序是這樣的:

從 index2 索引樹找到滿足索引值是’zhangs’的記錄,找到的第一個是 ID1;

到主鍵上查到主鍵值是 ID1 的行,判斷出 email 的值不是’zhangssxyz@xxx.com’,這行記錄丟棄;

取 index2 上剛剛查到的位置的下一條記錄,發(fā)現(xiàn)仍然是’zhangs’,取出 ID2,再到 ID 索引上取整行然后判斷,這次值對了,將這行記錄加入結(jié)果集;

重復(fù)上一步,直到在 idxe2 上取到的值不是’zhangs’時,循環(huán)結(jié)束。

在這個過程中,要回主鍵索引取 4 次數(shù)據(jù),也就是掃描了 4 行。

但是,對于這個查詢語句來說,如果你定義的 index2 不是 email(6) 而是 email(7),也就是說取 email 字段的前 7 個字節(jié)來構(gòu)建索引的話,即滿足前綴’zhangss’的記錄只有一個,也能夠直接查到 ID2,只掃描一行就結(jié)束了。

也就是說使用前綴索引,定義好長度,就可以做到既節(jié)省空間,又不用額外增加太多的查詢成本。

當要給字符串創(chuàng)建前綴索引時,有什么方法能夠確定我應(yīng)該使用多長的前綴呢?

實際上,我們在建立索引時關(guān)注的是區(qū)分度,區(qū)分度越高越好。因為區(qū)分度越高,意味著重復(fù)的鍵值越少。因此,我們可以通過統(tǒng)計索引上有多少個不同的值來判斷要使用多長的前綴。

你可以使用下面這個語句,算出這個列上有多少個不同的值:

mysql> select count(distinct email) as L from SUser;

然后,依次選取不同長度的前綴來看這個值,比如我們要看一下 4~7 個字節(jié)的前綴索引,可以用這個語句:

mysql> select

count(distinct left(email,4))as L4,

count(distinct left(email,5))as L5,

count(distinct left(email,6))as L6,

count(distinct left(email,7))as L7,

from SUser;

當然,使用前綴索引很可能會損失區(qū)分度,所以你需要預(yù)先設(shè)定一個可以接受的損失比例,比如 5%。然后,在返回的 L4~L7 中,找出不小于 L * 95% 的值,假設(shè)這里 L6、L7 都滿足,你就可以選擇前綴長度為 6。

前綴索引對覆蓋索引的影響

你先來看看這個 SQL 語句:

select id,email from SUser where email='zhangssxyz@xxx.com';

相比,這個語句只要求返回 id 和 email 字段。

所以,如果使用 index1(即 email 整個字符串的索引結(jié)構(gòu))的話,可以利用覆蓋索引,從 index1 查到結(jié)果后直接就返回了,不需要回到 ID 索引再去查一次。而如果使用 index2(即 email(6) 索引結(jié)構(gòu))的話,就不得不回到 ID 索引再去判斷 email 字段的值

即使你將 index2 的定義修改為 email(18) 的前綴索引,這時候雖然 index2 已經(jīng)包含了所有的信息,但 InnoDB 還是要回到 id 索引再查一下,因為系統(tǒng)并不確定前綴索引的定義是否截斷了完整信息。

其他方式

對于類似于郵箱這樣的字段來說,使用前綴索引的效果可能還不錯。但是,遇到前綴的區(qū)分度不夠好的情況時,我們要怎么辦呢?

假設(shè)你維護的數(shù)據(jù)庫是一個市的公民信息系統(tǒng),這時候如果對身份證號做長度為 6 的前綴索引的話,這個索引的區(qū)分度就非常低了。

按照我們前面說的方法,可能你需要創(chuàng)建長度為 12 以上的前綴索引,才能夠滿足區(qū)分度要求。

但是,索引選取的越長,占用的磁盤空間就越大,相同的數(shù)據(jù)頁能放下的索引值就越少,搜索的效率也就會越低。

第一種方式是使用倒序存儲。如果你存儲身份證號的時候把它倒過來存,每次查詢的時候,你可以這么寫:

mysql> select field_list from t where id_card = reverse('input_id_card_string')

由于身份證號的最后 6 位沒有地址碼這樣的重復(fù)邏輯,所以最后這 6 位很可能就提供了足夠的區(qū)分度。當然了,實踐中你不要忘記使用 count(distinct) 方法去做個驗證。

第二種方式是使用 hash 字段。你可以在表上再創(chuàng)建一個整數(shù)字段,來保存身份證的校驗碼,同時在這個字段上創(chuàng)建索引。

mysql> alter table t add id_card_crc int unsigned, add index(id_card_crc);

然后每次插入新記錄的時候,都同時用 crc32() 這個函數(shù)得到校驗碼填到這個新字段。由于校驗碼可能存在沖突,也就是說兩個不同的身份證號通過 crc32() 函數(shù)得到的結(jié)果可能是相同的,所以你的查詢語句 where 部分要判斷 id_card 的值是否精確相同。

mysql> select field_list from t where id_card_crc=crc32('input_id_card_string') and id_card='input_id_card_string'

這樣,索引的長度變成了 4 個字節(jié),比原來小了很多。

接下來,我們再一起看看使用倒序存儲和使用 hash 字段這兩種方法的異同點。

首先,它們的相同點是,都不支持范圍查詢。倒序存儲的字段上創(chuàng)建的索引是按照倒序字符串的方式排序的,已經(jīng)沒有辦法利用索引方式查出身份證號碼在[ID_X, ID_Y]的所有市民了。同樣地,hash 字段的方式也只能支持等值查詢。

它們的區(qū)別,主要體現(xiàn)在以下三個方面:

從占用的額外空間來看,倒序存儲方式在主鍵索引上,不會消耗額外的存儲空間,而 hash 字段方法需要增加一個字段。當然,倒序存儲方式使用 4 個字節(jié)的前綴長度應(yīng)該是不夠的,如果再長一點,這個消耗跟額外這個 hash 字段也差不多抵消了。

在 CPU 消耗方面,倒序方式每次寫和讀的時候,都需要額外調(diào)用一次 reverse 函數(shù),而 hash 字段的方式需要額外調(diào)用一次 crc32() 函數(shù)。如果只從這兩個函數(shù)的計算復(fù)雜度來看的話,reverse 函數(shù)額外消耗的 CPU 資源會更小些。

從查詢效率上看,使用 hash 字段方式的查詢性能相對更穩(wěn)定一些。因為 crc32 算出來的值雖然有沖突的概率,但是概率非常小,可以認為每次查詢的平均掃描行數(shù)接近 1。而倒序存儲方式畢竟還是用的前綴索引的方式,也就是說還是會增加掃描行數(shù)。小結(jié)

Q&A

char 和 varchar 可以設(shè)置長度,這個長度是干什么的,對于不同字符集又有什么影響?一直看到不同的解釋,懇請老師專業(yè)的解釋一下

char(N)表示“最長存N,但是如果字符串小于N,用空格補到N”

varchar(N)表示“最長存N,如果字符串小于N,按照實際長度來存”

什么的,對于不同字符集又有什么影響?一直看到不同的解釋,懇請老師專業(yè)的解釋一下

char(N)表示“最長存N,但是如果字符串小于N,用空格補到N”

varchar(N)表示“最長存N,如果字符串小于N,按照實際長度來存”

本文地址:https://blog.csdn.net/MariaOzawa/article/details/107320595

如您對本文有疑問或者有任何想說的,請點擊進行留言回復(fù),萬千網(wǎng)友為您解惑!

總結(jié)

以上是生活随笔為你收集整理的mysql索引 钱缀_mysql字符串前缀索引的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯,歡迎將生活随笔推薦給好友。