讲师中心 微信公众号
AI工具推荐 视频效率加速

构建高性能短链接生成器:基于 Webman 的分库分表设计

轻晨吖_2193

轻晨吖_2193

发布时间:2026-06-07 20:12:02

|

942人浏览过

|

来源于php中文网

原创

Webman短链接分库分表核心是解决ID耗尽与QPS瓶颈,须从路由可控、ID分散、连接隔离三处下手:用Snowflake变种生成Base62短码,短码前两位哈希分库+按月分表,PDO按库隔离禁持久化,缓存穿透需锁+空值标记。

构建高性能短链接生成器:基于 webman 的分库分表设计

Webman 做短链接生成器,分库分表不是为了“炫技”,而是解决两个硬伤:单表主键 ID 用完(比如 bigint 溢出)、单库写入 QPS 上不去(高频生成 + 高频跳转)。真要扛住日均亿级生成+十亿级跳转,必须从路由可控、ID 分散、连接隔离三处下手。

短链接 ID 不能依赖自增主键

直接用 MySQL AUTO_INCREMENT 当短码,线上跑不过三个月。原因很实在:ID 线性增长,热点集中在最新几张表;并发插入争抢同一张表的自增锁;一旦某库宕机,整个 ID 生成链就断。

  • 改用 Snowflake 变种:Worker ID 按分库编号分配(如库 short_0 对应 worker_id = 0),时间戳右移 12 位,序列号 12 位,生成 64 位整数后转 Base62(非 Base64,避免 URL 编码问题)
  • 禁止把生成逻辑塞进事务里——INSERT ... SELECT 或 REPLACE INTO 都会锁表,高并发下直接拖垮吞吐
  • 预生成池更稳妥:后台协程每 5 秒批量生成 1000 个未使用的 short_code,存 Redis List(short:pool),业务层 LPOP 取用,失败则 fallback 到实时计算

跳转查询必须命中单库单表,不能 UNION ALL 扫全库

用户点短链,GET /s/abc123,响应必须在 20ms 内完成。如果每次都要遍历 short_0 到 short_9 十个库查 short_code = 'abc123',延迟直接翻十倍,还容易触发慢查询告警。

Webman 2.2.0
Webman 2.2.0

Webman 2.2.0版本强化了 TCP/UDP 服务支持,优化路由组管理,并增强异步任务处理能力。结合协程与连接池技术,Webman 能轻松应对高并发场景,适用于网站、接口服务、即时通讯、物联网及游戏开发,兼具高性能、灵活扩展与稳定可靠,是多场景 PHP 服务开发的理想选择。

下载
  • 短码前两位做分片键:abc123 → 取 hash('ab') % 10 → 路由到 short_2 库;表名再按月分(link_202606),这样一次定位到唯一物理表
  • 建唯一索引必须包含分片字段:UNIQUE KEY uk_short_code_shard (short_code, shard),否则跨库重复短码无法拦截
  • 禁止在模型层写 where('short_code', $code) 后让 ORM 自动路由——ThinkORM 的 getTable() 不支持运行时传参分库,得自己封装 Db::connection("short_{$shard}")->table("link_{$month}")->where(...)

PDO 连接必须按库隔离,且禁用持久化

Webman Worker 常驻内存,一个没关紧的连接,可能在凌晨三点还在往已下线的 short_5 库发心跳,报错 MySQL server has gone away 却没人发现。

  • 每个分库初始化独立 PDO 实例,绑定到容器时带明确命名:Container::set('short_db_0', new PDO($dsn0, $user, $pass, [PDO::ATTR_PERSISTENT => false]))
  • 别在 onWorkerStart 里 new PDO 后赋值给静态变量——多进程间不共享,且 PHP 8.5.5 对静态资源序列化有更严校验,容易 crash
  • 连接异常必须显式关闭:try { $pdo->query(...); } catch (\PDOException $e) { $pdo = null; },否则连接泄漏会随 Worker 生命周期累积

缓存穿透防护要覆盖“空结果”和“过期瞬间”

短链跳转是典型的读多写少场景,但恶意刷不存在的 /s/zzzzzz 或刚好在缓存过期那 1ms 内涌进 1000 请求,数据库立马被打满。

  • Redis Key 必须带版本号和空值标记:short:code:abc123:v2 存真实数据,short:miss:abc123:v2 存空结果(TTL 设为 1 分钟,比业务过期时间短)
  • 查缓存 miss 时,先用 SETNX short:lock:abc123:v2 1 EX 3 抢分布式锁,抢到才查 DB,查完立刻写缓存并删锁;没抢到就 sleep(10) 后重试,避免雪崩
  • 请求级缓存兜底:在 Controller 里用 static $cache = [] 记一次请求内重复查同一个短码,防止同请求内多次穿透

真正难的不是分多少库、建多少表,而是每次生成或跳转时,你能否在 10 行代码内确定:该去哪个库、哪张表、用哪个连接、查什么索引、缓存怎么设、失败怎么兜。这些决策点一旦写死在构造函数或静态属性里,Webman 的常驻特性就会把它变成定时炸弹。

相关文章

数码产品性能查询
数码产品性能查询

该软件包括了市面上所有手机CPU,手机跑分情况,电脑CPU,电脑产品信息等等,方便需要大家查阅数码产品最新情况,了解产品特性,能够进行对比选择最具性价比的商品。

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
讯飞智作

讯飞智作是一款AI视频创作工具,AI文本配音工具,数字人课程、营销视频制作。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

AionClaw
AionClaw Hot

AionClaw是一款面向办公、创作和编程任务的AI桌面智能体。

墨刀AI
墨刀AI Hot

一款AI图像与设计工具,主要用于产品经理的专属智能体,适合需要提升相关任务效率的用户。

二狗PPT
二狗PPT Hot

一款AI演示文稿工具,主要用于专为中式职场打造的AI PPT生成工具,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

立刻MV
立刻MV Hot

立刻MV是一款AI文本写作工具,AI 音乐视频(MV)创作工具。

VibeKnow
VibeKnow Hot

一款AI视频创作工具,主要用于全球首个AI知识视频创作平台,文档、文章、网页,一键生成视频,适合需要提升相关任务效率的用户。

相关专题

更多
php文件怎么打开
php文件怎么打开

打开php文件步骤:1、选择文本编辑器;2、在选择的文本编辑器中,创建一个新的文件,并将其保存为.php文件;3、在创建的PHP文件中,编写PHP代码;4、要在本地计算机上运行PHP文件,需要设置一个服务器环境;5、安装服务器环境后,需要将PHP文件放入服务器目录中;6、一旦将PHP文件放入服务器目录中,就可以通过浏览器来运行它。

11184

2023.09.01

php怎么取出数组的前几个元素
php怎么取出数组的前几个元素

取出php数组的前几个元素的方法有使用array_slice()函数、使用array_splice()函数、使用循环遍历、使用array_slice()函数和array_values()函数等。本专题为大家提供php数组相关的文章、下载、课程内容,供大家免费下载体验。

6481

2023.10.11

php反序列化失败怎么办
php反序列化失败怎么办

php反序列化失败的解决办法检查序列化数据。检查类定义、检查错误日志、更新PHP版本和应用安全措施等。本专题为大家提供php反序列化相关的文章、下载、课程内容,供大家免费下载体验。

2155

2023.10.11

php怎么连接mssql数据库
php怎么连接mssql数据库

连接方法:1、通过mssql_系列函数;2、通过sqlsrv_系列函数;3、通过odbc方式连接;4、通过PDO方式;5、通过COM方式连接。想了解php怎么连接mssql数据库的详细内容,可以访问下面的文章。

4108

2023.10.23

php连接mssql数据库的方法
php连接mssql数据库的方法

php连接mssql数据库的方法有使用PHP的MSSQL扩展、使用PDO等。想了解更多php连接mssql数据库相关内容,可以阅读本专题下面的文章。

4814

2023.10.23

html怎么上传
html怎么上传

html通过使用HTML表单、JavaScript和PHP上传。更多关于html的问题详细请看本专题下面的文章。php中文网欢迎大家前来学习。

3791

2023.11.03

PHP出现乱码怎么解决
PHP出现乱码怎么解决

PHP出现乱码可以通过修改PHP文件头部的字符编码设置、检查PHP文件的编码格式、检查数据库连接设置和检查HTML页面的字符编码设置来解决。更多关于php乱码的问题详情请看本专题下面的文章。php中文网欢迎大家前来学习。

5437

2023.11.09

php文件怎么在手机上打开
php文件怎么在手机上打开

php文件在手机上打开需要在手机上搭建一个能够运行php的服务器环境,并将php文件上传到服务器上。再在手机上的浏览器中输入服务器的IP地址或域名,加上php文件的路径,即可打开php文件并查看其内容。更多关于php相关问题,详情请看本专题下面的文章。php中文网欢迎大家前来学习。

4262

2023.11.13

Playwright 测试失败怎么办
Playwright 测试失败怎么办

Playwright测试失败专题汇集超时、定位器匹配、浏览器提前关闭、依赖与插件配置、文件上传、SSL及Docker启动等故障文章,并介绍通过截图、报告和Trace定位错误。

20

2026.10.21

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Webman和FastAPI的性能对比
Webman和FastAPI的性能对比

共0课时 | 319人学习

Webman中文手册
Webman中文手册

共0课时 | 0人学习

webman初步使用及后台搭建
webman初步使用及后台搭建

共15课时 | 2.7万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn