1. DBLE 啟動時,讀取用戶在 rule.xml 配置的 sBeginDate 來確定起始時間
2. 讀取用戶在 rule.xml 配置的 sPartionDay 來確定每個 MySQL 分片承載多少天內的數據
3. 讀取用戶在 rule.xml 配置的 dateFormat 來確定分片索引的日期格式
4. 在 DBLE 的運行過程中,用戶訪問使用這個算法的表時,WHERE 子句中的分片索引值(字符串),會被提取出來嘗試轉換成 Java 內部的時間類型
5. 然後求分片索引值與起始時間的差,除以 MySQL 分片承載的天數,確定所屬分片
1. DBLE 啟動時,讀取用戶在 rule.xml 配置的起始時間 sBeginDate、終止時間 sEndDate 和每個 MySQL 分片承載多少天數據 sPartionDay
2. 根據用戶設置,建立起以 sBeginDate 開始,每 sPartionDay 天壹個分片,直到 sEndDate 為止的壹個環,把分片串聯串聯起來
3. 讀取用戶在 rule.xml 配置的 defaultNode
4. 在 DBLE 的運行過程中,用戶訪問使用這個算法的表時,WHERE 子句中的分片索引值(字符串),會被提取出來嘗試轉換成 Java 內部的日期類型
5. 然後求分片索引值與起始日期的差:如果分片索引值不早於 sBeginDate(哪怕晚於 sEndDate),就以 MySQL 分片承載的天數為模數,對分片索引值求模得到所屬分片;如果分片索引值早於 sBeginDate,就會被放到 defaultNode 分片上
與MyCat的類似分片算法對比
中間件
DBLE
MyCat
分片算法種類 date 分區算法 按日期(天)分片
兩種中間件的取模範圍分片算法使用上無差別
開發註意點
分片索引1. 必須是字符串,而且 java.text.SimpleDateFormat 能基於用戶指定的 dateFormat 來轉換成 java.util.Date
分片索引2. 提供帶狀模式和環狀模式兩種模式
分片索引3. 帶狀模式以 sBeginDate(含)起,以 86400000 毫秒(24 小時整)為壹份,每 sPartionDay 份為壹個分片,理論上分片數量可以無限增長,但是出現 sBeginDate 之前的數據而且沒有設定 defaultNode 的話,會路由失敗(如果有 defaultNode,則路由至 defaultNode)
分片索引4. 環狀模式以 86400000 毫秒(24 小時整)為壹份,每 sPartionDay 份為壹個分片,以 sBeginDate(含)到 sEndDate(含)的時間長度除以單個分片長度得到恒定的分片數量,但是出現 sBeginDate 之前的數據而且沒有設定 defaultNode 的話,會路由失敗(如果有 defaultNode,則路由至 defaultNode)
分片索引5. 無論哪種模式,分片索引字段的格式化字符串 dateFormat 由用戶指定
分片索引6. 無論哪種模式,劃分不是以日歷時間為準,無法對應自然月和自然年,且會受閏秒問題影響
運維註意點
擴容1. 帶狀模式中,隨著 sBeginDate 之後的數據出現,分片數量的增加無需再平衡
擴容2. 帶狀模式沒有自動增添分片的能力,需要運維手工提前增加分片;如果路由策略計算出的分片並不存在時,會導致失敗
擴容3. 環狀模式中,如果新舊 [sBeginDate,sEndDate] 之間有重疊,需要進行部分數據遷移;如果新舊 [sBeginDate,sEndDate] 之間沒有重疊,需要數據再平衡
配置註意點
配置項1. 在 rule.xml 中,可配置項為 <propertyname="sBeginDate"> 、 <propertyname="sPartionDay"> 、 <propertyname="dateFormat"> 、 <propertyname="sEndDate"> 和 <propertyname="defaultNode">
配置項2.在 rule.xml 中配置 <propertyname="dateFormat">,符合 java.text.SimpleDateFormat 規範的字符串,用於告知 DBLE 如何解析sBeginDate和sEndDate
配置項3.在 rule.xml 中配置 <propertyname="sBeginDate">,必須是符合 dateFormat 的日期字符串
配置項4.在 rule.xml 中配置 <propertyname="sEndDate">,必須是符合 dateFormat 的日期字符串;配置了該項使用的是環狀模式,若沒有配置該項則使用的是帶狀模式
配置項5.在 rule.xml 中配置 <propertyname="sPartionDay">,非負整數,該分片策略以 86400000 毫秒(24 小時整)作為壹份,而 sPartionDay 告訴 DBLE 把每多少份放在同壹個分片
配置項6.在 rule.xml 中配置 <propertyname="defaultNode"> 標簽,非必須配置項,不配置該項的話,用戶的分片索引值沒落在 mapFile 定義