讲师中心 微信公众号
AI工具推荐 视频效率加速

如何在Kubernetes中使用Operator实现MySQL集群的滚动升级?

夜磊大大_5491

夜磊大大_5491

发布时间:2026-08-08 17:07:03

|

847人浏览过

|

来源于php中文网

原创

根本原因是Operator未等待旧Pod退出就启动新Pod,导致PV或mysql.sock文件锁冲突;需检查partition、podManagementPolicy、PVC独立性、preStop脚本及GTID配置等。

如何在kubernetes中使用operator实现mysql集群的滚动升级?

滚动升级时MySQL Pod反复重启失败,Operator日志报 Failed to acquire lock

根本原因是Operator在执行滚动升级时,未等待旧Pod完全退出就启动新Pod,导致多个实例同时尝试写入同一份PV或争抢mysql.sock文件锁。尤其当使用NFS或HostPath类存储时,文件锁语义不严格,容易触发冲突。

  • 确认StatefulSet的updateStrategy.rollingUpdate.partition是否设为合理值(如从最后1个Pod开始升级,设为2表示只升级序号≥2的Pod)
  • 检查MySQL Operator自定义资源(CR)中spec.podManagementPolicy是否为OrderedReady(必须,否则并行启动会破坏主从同步顺序)
  • 确保PV绑定模式为Retain且每个Pod有独立PVC——不能共用同一个volumeClaimTemplates名称但未加{{.Index}}模板变量
  • 升级前手动执行kubectl exec -it mysql-0 -- mysqladmin shutdown验证单实例能否干净退出;若卡住,说明mysqld进程未响应SIGTERM,需在容器lifecycle.preStop里加mysqladmin shutdown -u root -p$MYSQL_ROOT_PASSWORD

Operator升级后主从复制中断,SHOW SLAVE STATUS\G显示Seconds_Behind_Master: NULL

这是滚动升级期间主库切换未被Operator正确感知所致。多数MySQL Operator(如Oracle MySQL Operator、Presslabs的)默认依赖mysql-operator CR里的spec.replication.primary字段静态指定主节点,而滚动升级时该字段未自动更新。

  • 改用基于GTID的复制:在CR中启用spec.replication.gtid: true,并确保所有Pod启动时带--gtid-mode=ON --enforce-gtid-consistency=true
  • 禁用Operator的“固定主库”逻辑——有些Operator版本(如v0.14.0之前)硬编码主Pod为mysql-0,升级时若mysql-0被重建,新Pod可能因binlog position不连续无法接续复制
  • 观察mysql-operator Pod日志中是否有reconciling primary role for mysql-1类信息;没有则说明Operator未触发主角色再选举,需升级Operator到支持自动failover的版本(如v0.17.0+)
  • 临时修复:升级完成后手动执行kubectl patch mysqlcluster mycluster -p '{"spec":{"replication":{"primary":"mysql-1"}}}' --type=merge,再进新主库执行START SLAVE;

升级卡在Waiting for pod mysql-2 to be ready,但kubectl get pod显示Running

Operator判断Pod“就绪”不仅看Phase=Running,还会执行readinessProbe中的exec命令(如mysqladmin ping -u root -p$MYSQL_ROOT_PASSWORD)。常见问题是密码环境变量未注入或MySQL启动慢于probe超时。

Kubernetes Network Policy Generator
Kubernetes Network Policy Generator

使用加权评分卡在12项标准上评估和比较隐私解决方案供应商。适用于选择隐私管理软件、比较数据保护方案等场景。

下载
  • 检查Pod的env字段是否包含MYSQL_ROOT_PASSWORD——某些Operator版本(如早期KubeDB)需显式在CR中配置spec.databaseSecret,否则密码为空导致mysqladmin认证失败
  • 调大readinessProbe.initialDelaySeconds(至少60秒),因为MySQL在挂载大容量PV后首次启动可能耗时超过30秒
  • 将readinessProbe.exec.command改为更宽松的检查:["sh", "-c", "mysqladmin ping -u root -p\"$MYSQL_ROOT_PASSWORD\" 2>/dev/null || exit 1"],避免stderr干扰
  • 确认securityContext.runAsUser与MySQL数据目录属主一致(通常为999),否则mysqladmin因权限拒绝无法访问socket文件

升级后客户端连接503,kubectl logs显示Operator反复报failed to sync MySQLCluster: context deadline exceeded

这通常是Operator控制器循环中调用Kubernetes API超时,而非MySQL本身问题。滚动升级期间大量Pod重建会触发密集的List/Watch事件,若Operator部署在资源紧张的节点上,或集群API Server负载高,就会持续超时。

  • 给Operator Deployment加resources.limits.memory: 512Mi和resources.requests.cpu: 200m——实测低于300m CPU时,在10节点集群上处理3副本MySQL升级易超时
  • 在Operator CR中设置spec.healthCheckPeriod: 30s(默认10s),降低健康检查频率,减少API压力
  • 检查Operator使用的ServiceAccount是否绑定了足够RBAC权限——缺失endpoints或events的list/watch权限会导致部分同步逻辑阻塞
  • 升级前先暂停Operator:kubectl scale deploy mysql-operator --replicas=0,等所有Pod进入Running状态后再恢复,避免升级过程与Operator reconcile竞争

滚动升级真正难的不是步骤,而是让Operator“理解”MySQL的状态迁移边界——它得知道什么时候该等主库刷盘完成,什么时候能安全切断从库IO线程。这些细节藏在Operator的Reconcile逻辑里,不看源码很难预判,所以升级前务必在测试环境跑通完整链路:从修改镜像版本→触发升级→观察主从延迟→验证应用读写。

热门AI工具

更多
DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

切问学术

切问学术是一款AI论文写作工具,复旦大学NLP团队推出的AI学术智能体。

UP简历
UP简历 Hot

一款AI办公效率工具,主要用于基于AI技术的免费在线简历制作工具,适合需要提升相关任务效率的用户。

SkildArt
SkildArt Hot

SkildArt是一款AI文本写作工具,一站式 AI 视觉创作平台。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

墨刀AI
墨刀AI Hot

一款AI图像与设计工具,主要用于产品经理的专属智能体,适合需要提升相关任务效率的用户。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

蛙蛙写作

一款AI论文写作工具,主要用于超级AI智能写作助手,适合需要提升相关任务效率的用户。

音述AI
音述AI Hot

一款AI音频处理工具,主要用于音述AI是一个以“用声音述说故事”为核心的 AI 音乐创作与声音分享社区,适合需要提升相关任务效率的用户。

相关专题

更多
mysql修改数据表名
mysql修改数据表名

MySQL修改数据表:1、首先查看数据库中所有的表,代码为:‘SHOW TABLES;’;2、修改表名,代码为:‘ALTER TABLE 旧表名 RENAME [TO] 新表名;’。php中文网还提供MySQL的相关下载、相关课程等内容,供大家免费下载使用。

2173

2023.06.20

MySQL创建存储过程
MySQL创建存储过程

存储程序可以分为存储过程和函数,MySQL中创建存储过程和函数使用的语句分别为CREATE PROCEDURE和CREATE FUNCTION。使用CALL语句调用存储过程智能用输出变量返回值。函数可以从语句外调用(通过引用函数名),也能返回标量值。存储过程也可以调用其他存储过程。php中文网还提供MySQL创建存储过程的相关下载、相关课程等内容,供大家免费下载使用。

1319

2023.06.21

mongodb和mysql的区别
mongodb和mysql的区别

mongodb和mysql的区别:1、数据模型;2、查询语言;3、扩展性和性能;4、可靠性。本专题为大家提供mongodb和mysql的区别的相关的文章、下载、课程内容,供大家免费下载体验。

775

2023.07.18

mysql密码忘了怎么查看
mysql密码忘了怎么查看

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql密码忘了怎么办呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2952

2023.07.19

mysql创建数据库
mysql创建数据库

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql怎么创建数据库呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

4968

2023.07.25

mysql默认事务隔离级别
mysql默认事务隔离级别

MySQL是一种广泛使用的关系型数据库管理系统,它支持事务处理。事务是一组数据库操作,它们作为一个逻辑单元被一起执行。为了保证事务的一致性和隔离性,MySQL提供了不同的事务隔离级别。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

1119

2023.08.08

sqlserver和mysql区别
sqlserver和mysql区别

SQL Server和MySQL是两种广泛使用的关系型数据库管理系统。它们具有相似的功能和用途,但在某些方面存在一些显著的区别。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

5231

2023.08.11

mysql忘记密码
mysql忘记密码

MySQL是一种关系型数据库管理系统,关系数据库将数据保存在不同的表中,而不是将所有数据放在一个大仓库内,这样就增加了速度并提高了灵活性。那么忘记mysql密码我们该怎么解决呢?php中文网给大家带来了相关的教程以及其他关于mysql的文章,欢迎大家前来学习阅读。

4602

2023.08.14

PixTV官网入口地址合集
PixTV官网入口地址合集

本专题汇总了 PixTV AI 一站式视频创作平台的官方入口与使用教程。无需下载软件,浏览器直接访问即可使用。平台将剧本、图像、视频、声音与剪辑整合在“无限画布”中,接入 GPT Image 2.5、Seedance 2.5 等头部模型。本专题整理了从新建画布、角色锚定、分镜拆分到视频生成与导出的完整操作指南,助你快速上手 AI 短剧与漫剧创作。

20

2026.10.10

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL vs MySQL
PostgreSQL vs MySQL

共1课时 | 183人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn