随笔:关于主键,除了自增,你还可以这样
moboyou 2025-04-05 18:52 11 浏览
当前各大主流关系型数据库都提供了自增主键生成策略,如Mysql的AUTO_INCREMENT,Sql Server的IDENTITY,Oracle则是通过SEQUENCE来实现主键自增。使用自增主键,比较简单,占用空间较小;主键按顺序增长存放,不会产生页分裂;同时也有一些不足,如多个系统之间集成数据时,容易有主键冲突;单表自增对于数据库单表压力较大,不适用于高并发及分布式场景,自增主键容易被探知到系统业务量等。由此可见在系统业务量较小,并发量不大时使用自增主键不失为一种较好的选择,但是当面对高并发、分布式需求时,使用自增主键会存在较大的瓶颈。
下面介绍业界较为流行的一些主键生成策略。
1.UUID模式
通用唯一识别码(Universally Unique Identifier),根据标准方法生成,不依赖中央机构的注册和分配,UUID具有唯一性重复UUID码概率接近零,可以忽略不计。UUID具有多个版本:基于时间的UUID、DCE安全的UUID、基于名字的UUID(MD5)(UUID.nameUUIDFromBytes())、随机UUID(UUID.randomUUID().toString())、基于名字的UUID(SHA1),Version 1/2适合应用于分布式计算环境下,具有高度的唯一性;Version 3/5适合于需要相同内容生成相同UUID的业务场景下;Version 4建议不要使用(随机数有可能出现重复,但是重复的概率极低,在设计时需要考虑到这一点)。UUID虽然解决了依赖于数据库生成主键的策略,但是也存在一些不足:占用存储空间大;随机生成,不具有连续性,作为主键时性能较差;无法根据主键进行排序,确定记录插入的先后顺序;对于开发人员不友好;如果生成过程中使用了机器MAC地址,存在一定安全隐患。
2.步长模式
即Flickr的sharding主键生成方案。使用多台数据库服务器,通过设置不同的起始值、一致自增步长,让每个数据库中各表主键保持唯一。如图所示:
步长方式在一定程度上解决了高并发的问题,但是也存在一些问题如:扩展困难,设置好步长后,再进行扩展将会比较困难;ID并不是按顺序严格单调递增的特性,只是趋势递增;每次获取ID仍然需要读写一次数据库,仍然存在瓶颈。
3.号段模式
即每次从数据库获取id时,从数据库取到当前id最大值,然后返回max+step,当应用程序用完这个号段后,再从数据库获取下一个长度为step的号段。为此需要专门设计一张用以记录id的表,在应用服务为集群,而主键服务器为单点时,多个应用服务节点同时获取id时,会产生冲突,可以增加version字段从而使用乐观锁进行并发访问控制。
id表主键(id)业务类型(id_type)当前最大id (max_id)号段长度(step)版本号(version)
号段模式将主键缓存在应用服务端,从而减少对数据库的访问频率;在数据库数据库不可用时,应用服务仍然可以持续运行一段时间直到当前号段用完;但是在应用服务重启时有可能丢失部分id,导致id增长不连续。
基于号段模式有一些成熟方案,且经过实践验证:美团的Leaf-segment对号段发放方式进行了双buffer缓存及高可用容灾优化。采用双buffer模式,在当前号段消费到某个点时就异步的把下一个号段加载到内存中。而不需要等到号段用尽的时候才去更新号段,不会在应用服务器向数据库请求id时,因为id号段没有取回来,导致线程阻塞。
滴滴的TinyId参照了美团Leaf的实现方式,并对其做了扩展,增加了多db支持和tinyid-client。
4.snowflake模式(雪花算法)
Twitter实现的分布式ID生成算法。结构如下:
0-00000000000000000000000000000000000000000-00000-00000-000000000000
- 1 bit:保留位,为符号位,全部为0,表示生成的id都是正数。
- 41bit:时间戳,单位为毫秒,41位可以表示69年的时间。
- 10bit:机器id,10bit里面5位代表机房id,5位代表机器id,可以表示32个机房,每个机房里面可以用32台机器。
- 12bit:12位序列号,按顺序递增,记录每个节点1毫秒内产生的id,每毫秒可以产生4096个id。
snowflake的优点:
- 主键在单个节点上是按序列递增的,能够按照时间趋势进行递增。
- 主键的生成不依赖于数据库,可以由应用程序生成。
- 在分布式集群内不会产生重复id。
- 可以根据业务需求对bit位进行调整。
snowflake的缺点:
- 对于时间依赖较高,如果时间回拨,则会产生主键重复情况。
- 当集群规模较大时,workid配置会增加一定成本。
美团的Leaf-snowflake,使用zk解决了snowflake依赖于时钟,时间回拨产生重复主键问题;百度的UidGenerator,支持自定义时间戳、workerId、序列号等。
5.Redis模式
利用Redis原子操作INCR和INCRBY来实现,使用Redis集群提高并发量,与步长模式类似,只不过将id生成器由传统数据库换成效率更高的Redis数据库。但是当Redis重启或者宕机,记录主键值会丢失,所以利用Redis进行主键生成时需要对当前主键值进行持久化。Redis支持RDB和AOF两种持久化机制。RDB模式下,可能会丢失部分未打镜像的数据,根据快照恢复后会产生部分重复ID,故RDB不适合实施持久化Redis数据场景。AOF以独立日志记录每次写命令,重启时执行日志中的命令进行数据恢复,不会出现ID重复现象,但是会由于备份命令过多,导致Redis恢复数据时间较长。
以上介绍了五种数据库主键的生成策略,大家可以根据具体业务场景和系统实际情况选择一款最适合自己的主键策略,提升数据库性能,保证在高并发情况下系统运行稳定性。
相关推荐
- 分享一个企业网站前后台功能源代码
-
企业网站前后台功能图文介绍一、前台页面介绍1.首页亮点:大气Banner轮播、产品服务、公司优势、成功案例、新闻动态等一屏展示。截图:首页全景展示,突出企业形象与主要业务。2.关于我们亮点:公司简...
- SEO建站站群怎样快速的获得源代码
-
第一种,直接下载保存。可能有的站长并不知道怎样操作,其实最重要的就是将这个站点直接另存为,然后选择一个需要的目录。这是一种快速获得别人网站源代码的过程,但是这个不一定完全能使用,有可能其他站长对自己源...
- 分享8个精美网页模版/设计平台, 小团队也能做出专业级产品
-
在现代社会,网页已经成为企业、个人展示和宣传的重要窗口,因此掌握网页制作技能是非常有必要的。今天,我们将为大家介绍8款优秀的网页设计模板网站,哪怕是小白也能帮助你快速搭建出令人惊艳的网页。一、即时设计...
- 一键批量生成视频、批量混剪的AI视频开源工具,可一键发布多平台
-
如果你是一位自媒体创作者,想要快速批量生成短视频并自动发布到各大视频平台,那么这款名为MoneyPrinterPlus的开源工具,绝对是你不容错过的宝藏。这个工具不仅能够帮助你一键批量生成短视频,...
- 小白教你做网站 开放源代码(网站开发源代码)
-
昨天教大家搭建环境不知道大家弄好了没有问题的话就回复我一开始让你们关注微信公众号是以为回复太多忙不过来现在看来也没几个回复的我还能应付不过头条回复机制貌似有问题有的回复停一会就消失了不...
- 把DeepSeek生成的动效网页放进PPT,大佬推荐这个神器,免费用!
-
昨天,AI界自媒体和头部大佬@数字生命卡兹克,在给大家分享“在PPT中插入AI生成的动态可视化效果”时,给大家推荐了不坑盒子。(其实这个我也发过视频,也直播讲过……)本来准备缓缓更新这一版的不坑盒子的...
- HTML5响应式餐饮加盟管理类企业网站源码,自适应手机版
-
织梦dedecms响应式餐饮美食加盟企业网站模板(自适应手机移动端)该网站适合餐饮类,火锅料,饭店类通用,一站式解决方案可以开发定制,企业网站定制开发,微信小程序、商城开发等解决方案直接在宝塔环境安装...
- 教你免费搭建个人网站(GitHub)(免费建立个人网页)
-
GitHubDesktop是GitHub公司发布的一款桌面版应用。无论您是Git的新手还是经验丰富的用户,GitHubDesktop都可以简化您的开发工作流程。不需要使用Git命令,即可把您本地...
- 常用JSP文件上传,下载的一些方法(jsp如何实现文件上传下载)
-
常用JSP文件上传,下载的一些方法,Java实现文件分片上传、大文件秒传,大文件如何做断点续传?JAVAWEB文件上传及下载,JAVA大文件上传,大文件下载解决方案,JAVA实现文件分片上传并且断点...
- Django媒体资源(附一套简易Django文件上传源码)
-
媒体资源——MEDIA一般情况下,STATIC_URL是设置静态文件的路由地址,如CSS文件,JavaScript文件以及常用的图片等信息。对于一些经常变动的资源,通常将其存放在媒体资源文件夹,如用户...
- m3u8转换mp4格式:批量转换视频,7招让你一键转换
-
很多人下载网络视频时,得到的不是常见的MP4文件,而是.m3u8播放列表文件。这种文件本质上是HLS(HTTPLiveStreaming)视频切片索引,需要先把里面的.ts片段下载,再...
- 4、学快速建站笔记-网站源码下载并上传空间
-
1、说明:网站源码百度上有很多,淘宝上也有很多,源码本身是完全免费使用不要钱的。2、随便选一个喜欢的下载。(举例)说明:记得是下载源码,不是模板。3、解压说明:解压后就是上面这样子,然后把文件名de@...
- .NET大文件上传详解及实例代码(netcore文件上传api)
-
前端用了HTML,VUE2,VUE3,后端用了ASP.NET,.NETCore.NETMVC,IDE用了VisualStudio2010,VisualStudio2013,VisualS...
- github上有人收集武汉公益信息,还做了个网站,源代码都出来了
-
最新新型冠状病毒的爆发,让全国各地深入水深火热的抗病毒战争当中,尤其是武汉,时不时爆出缺物资,缺食物,缺医疗人员的信息。甚至有不少医护人员感染,还有医生因此去世。全国各地网友纷纷献出爱心,寄物资,捐款...
- 短视频源码,短视频平台搭建需要用到的基本功能
-
短视频平台搭建需要用到的一些基本功能1、推荐机制,在小视频源码开发短视频推荐功能的时候,需要设计为不重复推荐给用户已经看过的视频,如果需要实现该功能,一定是需要把观看记录保存起来,可以用数据库,Red...
- 一周热门
- 最近发表
- 标签列表
-
- 外键约束 oracle (36)
- oracle的row number (32)
- 唯一索引 oracle (34)
- oracle in 表变量 (28)
- oracle导出dmp导出 (28)
- oracle两个表 (20)
- oracle 数据库 字符集 (20)
- 多线程的创建方式 (29)
- 多线程 python (30)
- java多线程并发处理 (32)
- 宏程序代码一览表 (35)
- c++需要学多久 (25)
- css class选择器用法 (25)
- css样式引入 (30)
- css教程文字移动 (33)
- php简单源码 (36)
- php个人中心源码 (25)
- php小说爬取源码 (23)
- 云电脑app源码 (22)
- html画折线图 (24)
- docker好玩的应用 (28)
- linux有没有pe工具 (34)
- mysql数据库源码 (21)
- php开源万能表单系统源码 (21)
- 可以上传视频的网站源码 (25)