电脑知识|欧美黑人一区二区三区|软件|欧美黑人一级爽快片淫片高清|系统|欧美黑人狂野猛交老妇|数据库|服务器|编程开发|网络运营|知识问答|技术教程文章 - 好吧啦网

您的位置:首頁技術(shù)文章
文章詳情頁

Java 基于雪花算法生成分布式id

瀏覽:92日期:2022-08-11 09:15:09
目錄SnowFlake算法原理介紹算法實(shí)現(xiàn)SnowFlake算法原理介紹

在分布式系統(tǒng)中會將一個業(yè)務(wù)的系統(tǒng)部署到多臺服務(wù)器上,用戶隨機(jī)訪問其中一臺,而之所以引入分布式系統(tǒng)就是為了讓整個系統(tǒng)能夠承載更大的訪問量。諸如訂單號這些我們需要它是全局唯一的,同時我們基本上都會將它作為查詢條件;出于系統(tǒng)安全考慮不應(yīng)當(dāng)讓其它人輕易的就猜出我們的訂單號,同時也要防止公司的競爭對手直接通過訂單號猜測出公司業(yè)務(wù)體量;為了保證系統(tǒng)的快速響應(yīng)那么生成算法不能太耗時。而雪花算法正好解決了這些問題。

SnowFlake 算法(雪花算法), 是Twitter開源的分布式id生成算法。其核心思想就是: 使用一個64 bit的long型的數(shù)字作為全局唯一id。它的結(jié)構(gòu)如下:

Java 基于雪花算法生成分布式id

下面我們來對每一部分進(jìn)一步的分析:

符號標(biāo)識位(1位):計算機(jī)中為了區(qū)分負(fù)數(shù)(1)和正數(shù)(0),設(shè)計者將第一位做為符號位,ID通常使用正數(shù),因此最高位固定為0; 41位時間截(毫秒),這個是使用 當(dāng)前時間 減去 開始時間 得到的值;因此一旦我們的算法投入使用,那么程序中設(shè)置的開始時間就不能再去隨意更改了,否則將可能出現(xiàn)重復(fù)的id值;

由于是基于時間來實(shí)現(xiàn)的且只有41位,由此可以計算出該算法只能使用70年左右:(2^41)/(1000*60*60*24*365) = 69.7 年 ;

10位機(jī)器ID:共計1024個節(jié)點(diǎn),通常將其分為2部分:機(jī)房ID(dataCenterId) 和 機(jī)器ID(workerId); 12 位序列號:毫秒內(nèi)的計數(shù),共計4098個;簡單來說就是每毫秒內(nèi)從0開始計算得到值; 最終SnowFlake算法總結(jié)如下:整體上按照時間自增排序,并且整個分布式系統(tǒng)內(nèi)不會產(chǎn)生ID 碰撞(由機(jī)房ID和機(jī)器ID作區(qū)分),并且效率較高。最多支持1024臺機(jī)器,每臺機(jī)器每毫秒能夠生成最多4096個ID,整個集群理論上每秒可以生成 1024 * 1000 * 4096 = 42 億個ID。

這里不要覺得每毫秒4098個ID少了,我們計算一下每臺機(jī)器理論上每秒可以支持 4096*1000 = 400萬左右;要知道天貓雙11那么大的訂單量每秒也才50萬筆;因此是完全夠用的。

算法實(shí)現(xiàn)

我們在上面已經(jīng)了解了SnowFlake的算法結(jié)構(gòu),下面是Java版本的實(shí)現(xiàn)。注意我們在實(shí)現(xiàn)該算法時,不一定要死死的按照上面的來實(shí)現(xiàn),可以根據(jù)自身業(yè)務(wù)情況進(jìn)行定制化;比如說機(jī)器ID,對于大部分的小項目來說根本不會分啥機(jī)房,因此我們完全可以根據(jù)服務(wù)器IP來弄;同時Twitter公布的算法中最終生成的id長度為15,但是還是根據(jù)自身業(yè)務(wù)情況進(jìn)行調(diào)整。比如標(biāo)準(zhǔn)的算法只支持使用70年左右,但是我們可以通過擴(kuò)展長度來增加年限。

public class SnowFlakeIdWorker { /** * 開始時間戳,單位毫秒;這里是2021-06-01 */ private static final long TW_EPOCH = 1622476800000L; /** * 機(jī)器 ID 所占的位數(shù) */ private static final long WORKER_ID_BITS = 5L; /** * 數(shù)據(jù)標(biāo)識 ID 所占的位數(shù) */ private static final long DATA_CENTER_ID_BITS = 5L; /** * 支持的最大機(jī)器ID,最大為31 * * PS. Twitter的源碼是 -1L ^ (-1L << workerIdBits);這里最后和-1進(jìn)行異或運(yùn)算,由于-1的二進(jìn)制補(bǔ)碼的特殊性,就相當(dāng)于進(jìn)行取反。 */ private static final long MAX_WORKER_ID = ~(-1L << WORKER_ID_BITS); /** * 支持的最大機(jī)房ID,最大為31 */ private static final long MAX_DATA_CENTER_ID = ~(-1L << DATA_CENTER_ID_BITS); /** * 序列在 ID 中占的位數(shù) */ private static final long SEQUENCE_BITS = 12L; /** * 機(jī)器 ID 向左移12位 */ private static final long WORKER_ID_SHIFT = SEQUENCE_BITS; /** * 機(jī)房 ID 向左移17位 */ private static final long DATA_CENTER_ID_SHIFT = SEQUENCE_BITS + WORKER_ID_BITS; /** * 時間截向左移22位 */ private static final long TIMESTAMP_LEFT_SHIFT = SEQUENCE_BITS + WORKER_ID_BITS + DATA_CENTER_ID_BITS; /** * 生成序列的掩碼最大值,最大為4095 */ private static final long SEQUENCE_MASK = ~(-1L << SEQUENCE_BITS); /** * 工作機(jī)器 ID(0~31) */ private final long workerId; /** * 機(jī)房 ID(0~31) */ private final long dataCenterId; /** * 毫秒內(nèi)序列(0~4095) */ private long sequence = 0L; /** * 上次生成 ID 的時間戳 */ private long lastTimestamp = -1L; /** * 創(chuàng)建 ID 生成器的方式一: 使用工作機(jī)器的序號(也就是將機(jī)房的去掉給機(jī)器ID使用),范圍是 [0, 1023],優(yōu)點(diǎn)是方便給機(jī)器編號 * * @param workerId 工作機(jī)器 ID */ public SnowFlakeIdWorker(long workerId) {// 計算最大值long maxMachineId = (MAX_DATA_CENTER_ID + 1) * (MAX_WORKER_ID + 1) - 1;if (workerId < 0 || workerId > maxMachineId) { throw new IllegalArgumentException(String.format('Worker ID can’t be greater than %d or less than 0', maxMachineId));}// 取高位部分作為機(jī)房ID部分this.dataCenterId = (workerId >> WORKER_ID_BITS) & MAX_DATA_CENTER_ID;// 取低位部分作為機(jī)器ID部分this.workerId = workerId & MAX_WORKER_ID; } /** * 創(chuàng)建 ID 生成器的方式二: 使用工作機(jī)器 ID 和機(jī)房 ID,優(yōu)點(diǎn)是方便分機(jī)房管理 * * @param dataCenterId 機(jī)房 ID (0~31) * @param workerId 工作機(jī)器 ID (0~31) */ public SnowFlakeIdWorker(long dataCenterId, long workerId) {if (workerId > MAX_WORKER_ID || workerId < 0) { throw new IllegalArgumentException(String.format('Worker ID can’t be greater than %d or less than 0', MAX_WORKER_ID));}if (dataCenterId > MAX_DATA_CENTER_ID || dataCenterId < 0) { throw new IllegalArgumentException(String.format('DataCenter ID can’t be greater than %d or less than 0', MAX_DATA_CENTER_ID));}this.workerId = workerId;this.dataCenterId = dataCenterId; } /** * 獲得下一個 ID(該方法是線程安全的) * * @return 返回一個長度位15的 long類型的數(shù)字 */ public synchronized long nextId() {long timestamp = timeGen();// 如果當(dāng)前時間小于上一次 ID 生成的時間戳,說明發(fā)生時鐘回?fù)埽瑸楸WCID不重復(fù)拋出異常。if (timestamp < lastTimestamp) { throw new RuntimeException(String.format('Clock moved backwards. Refusing to generate id for %d milliseconds', lastTimestamp - timestamp));}if (lastTimestamp == timestamp) { // 同一時間生成的,則序號+1 sequence = (sequence + 1) & SEQUENCE_MASK; // 毫秒內(nèi)序列溢出:超過最大值 if (sequence == 0) {// 阻塞到下一個毫秒,獲得新的時間戳timestamp = tilNextMillis(lastTimestamp); }} else { // 時間戳改變,毫秒內(nèi)序列重置 sequence = 0L;}// 上次生成 ID 的時間戳lastTimestamp = timestamp;// 移位并通過或運(yùn)算拼到一起return ((timestamp - TW_EPOCH) << TIMESTAMP_LEFT_SHIFT)| (dataCenterId << DATA_CENTER_ID_SHIFT)| (workerId << WORKER_ID_SHIFT)| sequence; } private long tilNextMillis(long lastTimestamp) {long timestamp = timeGen();while (timestamp <= lastTimestamp) { timestamp = timeGen();}return timestamp; } private long timeGen() {return System.currentTimeMillis(); }}

使用示例

// 初始化SnowFlakeIdWorker idWorker = new SnowFlakeIdWorker(1, 0);// 生成IDfor(int i=0; i<100; i++){ System.out.println(idWorker.nextId());}

注意服務(wù)器不能發(fā)生時鐘回?fù)埽聪到y(tǒng)時間發(fā)生錯誤,因為雪花算法是基于時間來生成,所有當(dāng)發(fā)生時鐘回?fù)芎髸?dǎo)致出現(xiàn)重復(fù)ID的問題。

以上就是Java 基于雪花算法生成分布式id的詳細(xì)內(nèi)容,更多關(guān)于Java 雪花算法生成分布式id的資料請關(guān)注好吧啦網(wǎng)其它相關(guān)文章!

標(biāo)簽: Java
相關(guān)文章:
主站蜘蛛池模板: 陕西安玻璃自动感应门-自动重叠门-磁悬浮平开门厂家【捷申达门业】 | 档案密集柜_手动密集柜_智能密集柜_内蒙古档案密集柜-盛隆柜业内蒙古密集柜直销中心 | 登车桥动力单元-非标液压泵站-非标液压系统-深圳市三好科技有限公司 | 【铜排折弯机,钢丝折弯成型机,汽车发泡钢丝折弯机,线材折弯机厂家,线材成型机,铁线折弯机】贝朗折弯机厂家_东莞市贝朗自动化设备有限公司 | 美侍宠物-专注宠物狗及宠物猫训练|喂养|医疗|繁育|品种|价格 | 400电话_400电话申请_866元/年_【400电话官方业务办理】-俏号网 3dmax渲染-效果图渲染-影视动画渲染-北京快渲科技有限公司 | 抓斗式清污机|螺杆式|卷扬式启闭机|底轴驱动钢坝|污水处理闸门-方源水利机械 | 首页 - 军军小站|张军博客 | 潜水搅拌机-双曲面搅拌机-潜水推进器|奥伯尔环保 | 根系分析仪,大米外观品质检测仪,考种仪,藻类鉴定计数仪,叶面积仪,菌落计数仪,抑菌圈测量仪,抗生素效价测定仪,植物表型仪,冠层分析仪-杭州万深检测仪器网 | 冷油器,取样冷却器,热力除氧器-连云港振辉机械设备有限公司 | 三轴曲线机-端子插拔力试验机|华杰仪器 | 合肥注册公司|合肥代办营业执照、2024注册公司流程 | 耐磨陶瓷,耐磨陶瓷管道_厂家-淄博拓创陶瓷科技 | 旋振筛_不锈钢旋振筛_气旋筛_旋振筛厂家—新乡市大汉振动机械有限公司 | 首页|专注深圳注册公司,代理记账报税,注册商标代理,工商变更,企业400电话等企业一站式服务-慧用心 | 专业生物有机肥造粒机,粉状有机肥生产线,槽式翻堆机厂家-郑州华之强重工科技有限公司 | 植筋胶-粘钢胶-碳纤维布-碳纤维板-环氧砂浆-加固材料生产厂家-上海巧力建筑科技有限公司 | 阻垢剂-反渗透缓蚀阻垢剂厂家-山东鲁东环保科技有限公司 | 单电机制砂机,BHS制砂机,制沙机设备,制砂机价格-正升制砂机厂家 单级/双级旋片式真空泵厂家,2xz旋片真空泵-浙江台州求精真空泵有限公司 | 薪动-人力资源公司-灵活用工薪资代发-费用结算-残保金优化-北京秒付科技有限公司 | 广州监控安装公司_远程监控_安防弱电工程_无线wifi覆盖_泉威安防科技 | 广东健伦体育发展有限公司-体育工程配套及销售运动器材的体育用品服务商 | 膏剂灌装旋盖机-眼药水灌装生产线-西林瓶粉剂分装机-南通博琅机械科技 | 吸污车_吸粪车_抽粪车_电动三轮吸粪车_真空吸污车_高压清洗吸污车-远大汽车制造有限公司 | 合肥仿石砖_合肥pc砖厂家_合肥PC仿石砖_安徽旭坤建材有限公司 | 超声波_清洗机_超声波清洗机专业生产厂家-深圳市好顺超声设备有限公司 | 天坛家具官网| 不发火防静电金属骨料_无机磨石_水泥自流平_修补砂浆厂家「圣威特」 | 电动百叶窗,开窗器,电动遮阳百叶,电动开窗机生产厂家-徐州鑫友工控科技发展有限公司 | 电缆故障测试仪_电缆故障定位仪_探测仪_检测仪器_陕西意联电气厂家 | 电动高尔夫球车|电动观光车|电动巡逻车|电动越野车厂家-绿友机械集团股份有限公司 | 空调风机,低噪声离心式通风机,不锈钢防爆风机,前倾皮带传动风机,后倾空调风机-山东捷风风机有限公司 | 高压分散机(高压细胞破碎仪)百科-北京天恩瀚拓 | 武汉天安盾电子设备有限公司 - 安盾安检,武汉安检门,武汉安检机,武汉金属探测器,武汉测温安检门,武汉X光行李安检机,武汉防爆罐,武汉车底安全检查,武汉液体探测仪,武汉安检防爆设备 | 干培两用箱-细菌恒温培养箱-菲斯福仪器| 继电器模组-IO端子台-plc连接线-省配线模组厂家-世麦德 | 碳纤维布-植筋胶-灌缝胶-固特嘉加固材料公司 | 连续油炸机,全自动油炸机,花生米油炸机-烟台茂源食品机械制造有限公司 | 辐射仪|辐射检测仪|辐射巡测仪|个人剂量报警仪|表面污染检测仪|辐射报警仪|辐射防护网 | 北京印刷厂_北京印刷_北京印刷公司_北京印刷厂家_北京东爵盛世印刷有限公司 |