mysql分区表达式_怎么定义 mysql hash分区使用的用 户定义的表达式
用戶需要在 rule.xml 中定義 partitionLength[] 和 partitionCount[] 兩個(gè)數(shù)組和 hashSlice 二元組。
在 DBLE 的啟動(dòng)階段,點(diǎn)乘兩個(gè)數(shù)組得到模數(shù),也是邏輯分片的數(shù)量
并且根據(jù)兩個(gè)數(shù)組的叉乘,得到各個(gè)邏輯分片到物理分片的映射表(物理分片數(shù)量由 partitionCount[] 數(shù)組的元素值之和)
此外根據(jù) hashSlice 二元組,約定把分片索引值中的第 4 字符到第 5 字符(字符串以 0 開(kāi)始編號(hào),編號(hào) 3 到編號(hào) 4 等于第 4 字符到第 5 字符)字符串用于 “字符串->整型”的轉(zhuǎn)換
在 DBLE 的運(yùn)行過(guò)程中,用戶訪問(wèn)使用這個(gè)算法的表時(shí),WHERE 子句中的分片索引值會(huì)被提取出來(lái),取當(dāng)中的第 4 個(gè)字符到第 5 字符,送入下一步
設(shè)置一個(gè)初始值為 0 的累計(jì)值,逐個(gè)取字符,把累計(jì)值乘以 31,再把這個(gè)字符的 unicode 值當(dāng)成長(zhǎng)整型加入到累計(jì)值中,如此類推直至處理完截取出來(lái)的所有字符,此時(shí)的累計(jì)值就能夠代表用戶的分片索引值,完成了 “字符串->整型” 的轉(zhuǎn)換
對(duì)上一步的累計(jì)值進(jìn)行求模,得到邏輯分片號(hào)
再根據(jù)邏輯分片號(hào),查映射表,直接得到物理分片號(hào)
與MyCat的類似分片算法對(duì)比
請(qǐng)點(diǎn)擊輸入圖片描述
兩種算法在string轉(zhuǎn)化為int之后,和 hash 分區(qū)算法相同,區(qū)別也繼承了 hash 算法的區(qū)別。
開(kāi)發(fā)注意點(diǎn)
【分片索引】1. 必須是字符串
【分片索引】2. 最大物理分片配置方法是,讓 partitionCount[] 數(shù)組和等于 2880
例如:
12880
或
1,11440,1440
【分片索引】3. 最小物理分片配置方法是,讓 partitionCount[] 數(shù)組和等于 1
例如
28801
【分片索引】4. partitionLength 和 partitionCount 被當(dāng)做兩個(gè)逗號(hào)分隔的一維數(shù)組,它們之間的點(diǎn)乘必須在 [1, 2880] 范圍內(nèi)
【分片索引】5. partitionLength 和 partitionCount 的配置對(duì)順序敏感
512,2561,2
和
256,5122,1
是不同的分片結(jié)果
【分片索引】6. 分片索引字段長(zhǎng)度小于用戶指定的截取長(zhǎng)度時(shí),截取長(zhǎng)度會(huì)安全減少到符合分片索引字段長(zhǎng)度
【數(shù)據(jù)分布】1. 分片索引字段截取越長(zhǎng)則越有利于數(shù)據(jù)均勻分布
【數(shù)據(jù)分布】2. 分片索引字段的內(nèi)容重復(fù)率越低則越有利于數(shù)據(jù)均勻分布
運(yùn)維注意點(diǎn)
【擴(kuò)容】1. 預(yù)先過(guò)量分片,并且不改變 partitionCount 和 partitionLength 點(diǎn)乘結(jié)果,也不改變截取設(shè)置 hashSlice 時(shí),可以避免數(shù)據(jù)再平衡,只需進(jìn)行涉及數(shù)據(jù)的遷移
【擴(kuò)容】2. 若需要改變 partitionCount 和 partitionLength 點(diǎn)乘結(jié)果或改變截取設(shè)置 hashSlice 時(shí),需要數(shù)據(jù)再平衡
【縮容】1. 預(yù)先過(guò)量分片,并且不改變 partitionCount 和 partitionLength 點(diǎn)乘結(jié)果,也不改變截取設(shè)置 hashSlice 時(shí),可以避免數(shù)據(jù)再平衡,只需進(jìn)行涉及數(shù)據(jù)的遷移
【縮容】2. 若需要改變 partitionCount 和 partitionLength 點(diǎn)乘結(jié)果或改變截取設(shè)置 hashSlice 時(shí),需要數(shù)據(jù)再平衡
配置注意點(diǎn)
【配置項(xiàng)】1. 在 rule.xml 中,可配置項(xiàng)為?? 、 和
【配置項(xiàng)】2.在 rule.xml 中配置 ?標(biāo)簽
內(nèi)容形式為:[,,...]
物理分片持有的虛擬分片數(shù)必須是整型,物理分片持有的虛擬分片數(shù)從左到右與同順序的物理分片數(shù)對(duì)應(yīng),partitionLength 和partitionCount 的點(diǎn)乘結(jié)果必須在 [1, 2880] 范圍內(nèi)
【配置項(xiàng)】3. 在 rule.xml 中配置 ?標(biāo)簽
內(nèi)容形式為:[,,...]
其中物理分片數(shù)必須是整型,物理分片數(shù)按從左到右的順序與同順序的物理分片持有的虛擬分片數(shù)對(duì)應(yīng),物理分片的編號(hào)從左到右連續(xù)遞進(jìn),partitionLength 和 partitionCount 的點(diǎn)乘結(jié)果必須在 [1, 2880] 范圍內(nèi)
【配置項(xiàng)】4. partitionLength 和 partitionCount 的語(yǔ)義是:持有partitionLength[i] 個(gè)虛擬分片的物理分片有 partitionCount[i] 個(gè)
例如
512,2561,2
語(yǔ)義是持有 512 個(gè)邏輯分片的物理分片有 1 個(gè),緊隨其后,持有 256 個(gè)邏輯分片的物理分片有 2 個(gè)
【配置項(xiàng)】5.partitionLength 和 partitionCount 都對(duì)書(shū)寫(xiě)順序敏感,
例如
512,2561,2
分片結(jié)果是第一個(gè)物理分片持有頭512個(gè)邏輯分片,第二個(gè)物理分片持有緊接著的256個(gè)邏輯分片,第三個(gè)物理分片持有最后256個(gè)邏輯分片,相對(duì)的
256,5122,1
分片結(jié)果則是第一個(gè)物理分片持有頭 256 個(gè)邏輯分片,第二個(gè)物理分片持有緊接著的 256 個(gè)邏輯分片,第三個(gè)物理分片持有最后 512 個(gè)邏輯分片
【配置項(xiàng)】6.partitionLength[] 的元素全部為 1 時(shí),這時(shí)候partitionCount 數(shù)組和等于 partitionLength 和 partitionCount 的點(diǎn)乘,物理分片和邏輯分片就會(huì)一一對(duì)應(yīng),該分片算法等效于直接取余
【配置項(xiàng)】7.在 rule.xml 中配置標(biāo)簽,從分片索引字段的第幾個(gè)字符開(kāi)始截取到第幾個(gè)字符:
若希望從首字符開(kāi)始截取 k 個(gè)字符( k 為正整數(shù)),配置的內(nèi)容形式可以為“ 0 : k ”、“ k ”或“ : k ”;
若希望從末字符開(kāi)始截取 k 個(gè)字符( k 為正整數(shù)),則配置的內(nèi)容形式可以為“ -k : 0 ”、“ -k ”或“ -k : ”;
若希望從頭第 m 個(gè)字符起算截取 n 個(gè)字符( m 和 n 都是正整數(shù)),則先計(jì)算出 i = m - 1 和 j = i + n - 1,配置的內(nèi)容形式為“ i : j ”;
若希望從尾第 m 個(gè)字符起算截取從尾算起的 n 個(gè)字符( m 和 n 都是正整數(shù)),則先計(jì)算出 i = -m + n - 1,配置的內(nèi)容形式可以為“ -m : i ”;
若希望不截取,則配置的內(nèi)容形式可以為“ 0 : 0 ”、“ 0 : ”、“ : 0 ”或 “ : ”
總結(jié)
以上是生活随笔為你收集整理的mysql分区表达式_怎么定义 mysql hash分区使用的用 户定义的表达式的全部?jī)?nèi)容,希望文章能夠幫你解決所遇到的問(wèn)題。
- 上一篇: 苹果5G基带芯片暂时失败:对手高通太强
- 下一篇: mysql简单聚合函数根据条件单表查询