什么是分布式SnowFlakeID?如何優化SnowFlakeID?這些問題可能是我們日常工作會見到的。通過這些問題,希望你能收獲更多。下面是揭開這些問題的詳細內容。
SnowFlake是twitter公司內部分布式項目采用的ID生成算法,開源后廣受國內大廠的好評。由這種算法生成的ID,我們就叫做SnowFlakeID
SnowFlakeID的大的特性就是天然去中心化,通過時間戳、工作機器編號兩個變量進行配置后,通過SnowFlake算法會生成唯一的遞增ID。在任何機器上,只要保證工作機器編號不同,就可以確保生成的ID唯一,且整體趨勢是遞增的
Snowflake的結構如下(每部分用-分開):
0 - 0000000000 0000000000 0000000000 0000000000 0 - 0000000000 - 000000000000
第一段1位為未使用,永遠固定為0
第二段41位為毫秒級時間(41位的長度可以使用69年)
第三段10位為workerId(10位的長度最多支持部署1024個節點)
第三段12位為毫秒內的計數(12位的計數順序號支持每個節點每毫秒產生4096個ID序號)
如果按照1024的滿節點(1個節點就是1個部署的服務)計算,每毫秒可生成的ID序號有1024*4096=4194304個,足以滿足現在絕大多數的業務情況
算法的核心如下
((當前時間 - 服務時間) << timestampLeftShift)
| (機器ID << workerIdShift)
| sequence;
服務時間指的是服務的開發時間,即第一個正式ID產生的時間。由于SnowFlakeID最長可用69年(因為只有41個bit,41個bit的大值換算成年就是69年)。所以服務時間越貼近上線時間,則該算法可用時間越長。
其中sequence為遞增序列,當前時間戳和上一ID生成時間戳一致時,sequence就遞增1,直到4096為止。
SnowFlake很好,分布式、去中心化、無第三方依賴。但它并不是完美的,由于SnowFlake強依賴時間戳,所以時間的變動會造成SnowFlake的算法產生錯誤。
時鐘回撥:最常見的問題就是時鐘回撥導致的ID重復問題,在SnowFlake算法中并沒有什么有效的解法,僅是拋出異常。時鐘回撥涉及兩種情況①實例停機→時鐘回撥→實例重啟→計算ID ②實例運行中→時鐘回撥→計算ID
手動配置:另一個就是workerId(機器ID)是需要部署時手動配置,而workerId又不能重復。幾臺實例還好,一旦實例達到一定量級,管理workerId將是一個復雜的操作。
ID生成器一旦不可用,可能造成所有數據庫相關新增業務都不可用,影響太大。所以時鐘回撥的問題必須解決。
造成時鐘回撥的原因多種多樣,可能是閏秒回撥,可能是NTP同步,還可能是服務器時間手動調整。總之就是時間回到了過去。針對回退時間的多少可以進行不同的策略改進。一般有以下幾種方案:
if (refusedSeconds <= 5) {
try {
//時間偏差大小小于5ms,則等待兩倍時間
wait(refusedSeconds << 1);//wait
} catch (InterruptedException e) {
e.printStackTrace();
}
currentSecond = getCurrentSecond();
}else {//時鐘回撥較大
//用其他策略修復時鐘問題
}
List<Long> uidList = uidProvider.provide(lastSecond.incrementAndGet());
實例運行中→時鐘回撥→計算ID
的情況。而實例停機→時鐘回撥→實例重啟→計算ID
的情況,可以通過實例啟動的時候,采用未使用過的workerId來完成。只要workerId和此前生成ID的workerId不一致,即便時間戳有誤,所生成的ID也不會重復。UidGenerator采取的就是這種方案,但這種方案又必須依賴一個存儲中心,不管是redis、mysql、zookeeper都可以,但必須存儲著此前使用過的workerId,不能重復。尤其是在分布式部署Id生成器的情況下,更要注意用一個存儲中心解決此問題。另外有需要云服務器可以了解下創新互聯cdcxhl.cn,海內外云服務器15元起步,三天無理由+7*72小時售后在線,公司持有idc許可證,提供“云服務器、裸金屬服務器、高防服務器、香港服務器、美國服務器、虛擬主機、免備案服務器”等云主機租用服務以及企業上云的綜合解決方案,具有“安全穩定、簡單易用、服務可用性高、性價比高”等特點與優勢,專為企業上云打造定制,能夠滿足用戶豐富、多元化的應用場景需求。
網頁標題:什么是分布式SnowFlakeID?如何優化SnowFlakeID?-創新互聯
分享鏈接:http://vcdvsql.cn/article42/dephec.html
成都網站建設公司_創新互聯,為您提供移動網站建設、用戶體驗、企業建站、標簽優化、ChatGPT、外貿建站
聲明:本網站發布的內容(圖片、視頻和文字)以用戶投稿、用戶轉載內容為主,如果涉及侵權請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網站立場,如需處理請聯系客服。電話:028-86922220;郵箱:631063699@qq.com。內容未經允許不得轉載,或轉載時需注明來源: 創新互聯