运维工程师之-MySQL的故障问题总结

2023-10-27

在这里插入图片描述

  1. 故障类问题
    你在日常工作中遇到过什么故障?
    你在日常工作中处理过什么故障?
    你平常工作都干什么活?

故障01:mysql时软件版本选择错误

每一个故事的背后都有一个事故,每个故障总结一个故事

软件版本 64位 32位选择错误
故障02: 安装故障
1.用户没创建 权限没给

2.初始化 mysqld mysql_install_db

本地的mariadb没卸载, /etc/my.cnf没有删掉 ,初始化时会导致失败

3.配置文件实际情况不对应(basedir , datadir)

此处该加上一个励志的故事,融入个人情感,刚开始学mysql的不容易与坚持

4.重启,数据盘没有挂载

/dev/sdb ----> /data 没有自动挂载 导致mysql启动不了
排查思路: 日志文件中的错误信息,当时对日志不是特别熟

5.mysql升级失败 5.5 —>8.0

当时不清楚mysql的这些原因,没有注意,领导让测试8.0的环境
我就下载了一个8.0.11版本,我安装到了测试服务器,原生产核心功能表的一部分数据通过MDP工具导出来了,恢复到测试中,然后应用测试的时候直接导致无法连接,通过查看官方文档8.0的那个<what is new?>,才明白了不能大版本升级
排错思路:

主要原因就是版本的特性原因,8.0不升级数据字典,,,8.0的密码和用户管理发生了巨大变化 先升级到5.7 再升级8.0,sql_mode,数据类型差别

这个问题当时卡了一个小时,第二周就要上线了,因为也没人协助我,从网上一直搜查资料一直熬到快三点了才解决,想想这几年刚大学毕业,一直觉得差其他人好多的,所以自己就特别要强,不会的东西就一直搞搞搞,现在想想,觉得自己做的无怨无悔,这个行业带给我很多好的结果,我就认为我自己肯定行,自从经历了那么多的熬夜查文档,解决问题的那个时刻真的让我就特别的开心,现在出现故障慢慢的就不怵了

故障03:数据库连接不上

1.网络不通,防火墙

1.网络不通:
    网线坏了(老鼠咬断了  机柜压断了  被人拔了 哈哈...)
    网卡  bond 交换机  路由器  回路 网络流量满负荷
    解决思路:  监控

2.防火墙:敲错防火墙规则,上来写错了一条规则,导致内网服务器访问不了了
        不过幸亏是在测试环境做的,有个好习惯就是任何调优配置都先在测试环境中配置

3.没启动 端口 IP

4.应用端客户端工具版本过低
https://downloads.mysql.com/archives/

5.连接数(499)
    redis雪崩 穿透
    日志
    show processlist;

故障问题04: 配置文件问题

故障问题05: 多实例

故障问题06: sql_mode(groupby,时间类型) 迁移升级

故障问题07: 数据类型

故障问题08: 字符集:乱码

故障问题09: 校对规则问题

故障问题10: update问题 binlog2sql

故障问题11: DDL, 数据库夯住了

show processlist;
pt-osc

故障问题12: select查询语句慢

头一天好好的,第二天就慢了 
optimize table t1;

故障问题13: 慢语句处理,同一个存储过程一天内执行了几十次

slowlog 抓到是一个存储过程,执行几十次

故障问题14: delete
binlog2sql 翻转 delete 替换为update

故障问题15: 索引问题:

荣誉索引过多,索引列比较长(前缀),联合索引(索引覆盖长度,顺序)
slowlog ----> explai ---->索引

故障问题16: 存储引擎

1. 表空间迁移
2. 每周六全备,其他时候binlog增量.
    异常断电,binlog损坏,ibdata1损坏
3. 碎片整理     
    alter table t1 engine innodb;
4. 锁等待  
5. 幻读,不可重复读

故障问题17:日志故障

1.reset master rm -rf 导致主从IO线程故障
   数据库如果出现损坏 无法完整恢复
   
2. gtid : --skip-gtids 导致数据无法恢复

3. slowlog

故障问题18: 备份恢复

1. mysqldump 加了 --set-gtid-purged=off,主从构建不成功
2. --max_allowed_packet,大表备份时报错
3. -E -R --triggers没加
4. 增量合并失败.

故障问题19: 主从

1.主从故障: IO SQL show slave  status \G
2.主从延时: 延时时间 日志量差异
3.主从不一致: 从库宕机 pt工具
4.延时从库 解决逻辑故障
5.过滤复制 只复制了部分库 没有复制mysql,查询时连接不上或没有权限
6.gtid复制搭建

故障问题20: 高可用MHA

只有vip功能 缺了binlogserver 故障提醒功能
MHA+keepalive 权重问题

故障问题21: 分布式Mycat

1.分片方式,分片策略设计不合理
2.跨分片join 全局表 ER表

故障问题:22: 优化

1. innodb_flush_log_at_trx_commit=0
2. sync_binlog=0
3. innodb_flush_method=fsync  占用大量的额外内存,
   配合固态硬盘使用 O_direct

2. 架构类

  1. 一主1从+读写分离proxysql maxscale (50G)
8核32G
阈值:
并发连接 800-1000
并发查询 5W QPS
并发事物 300 TPS

2.一主3从+读写分离+延时从 (100-200G)

8核32G
阈值:
并发连接 800-1000
并发查询 8W QPS
并发事物 200 TPS

3.一主多从+级联复制+过滤复制 (300-500G)

8核32G
阈值:
并发连接 800-1000
并发查询 15-20W QPS
并发事物 200 TPS

4.MHA+ProxySQL 1主3从

1主2从做MHA+proxySQL 1从做容灾
16核64G*3 + 8核16G

阈值:
并发连接 1500-2000
并发查询 12W QPS
并发事物 400 TPS

此架构适合电商平台,物流
2T数据
  1. PXC + proxySQL(MGC+maxscale)
16核64G*3 + 8核16G
阈值:
并发连接 1500-2000
并发查询 12W QPS
并发事物 400 TPS

此架构适合电商平台,物流 
2T数据

6.Mycat + MHA(PXC)*3 高可用分布式集群

16核128G*7
阈值:
并发连接 3000-5000
并发查询 20W QPS
并发事物 800-1000 TPS

教育行业(大数据平台) 
9T数据

7.redis sentinel+Docker

redis Cluster + k8s
  1. MongDB replication
保险类公司
16核 256内存 + 40T*4台
20T左右数据 +保单
  1. MongDB Sharding + HASH
数据在PB级别: 共享单车 百度地图 京东 360 
16核128G*9台*40T

3. 优化类

锁等待
索引+slow
innoDB换成TokuDB(MyROCKS)

4. 升级迁移

  1. zabbix
  2. MongDB Sharding + HASH
数据在PB级别: 共享单车 百度地图 京东 360 
3年-5年的某银行流水 30T
16核128G*9台*40T

5. 客观面试题:

你们公司架构是啥样的,做的什么业务,数据量,QPS,TPS?
你们公司数据库都用了那些产品,分别架构了什么服务?
你处理过什么故障吗?
你觉得我们公司需要招聘什么员工? 你觉得你是什么样的人? 你觉得我们为什么要招你?
你对SQL语句了解到什么程度?
你对索引了解吗? Btree查找算法原理是什么? 聚集索引和辅助索引区别?你怎么理解的索引树高度?
请你介绍下你了解的存储引擎类型?
请说明数据InnoDB,MyRocks,TokuDB区别?
InnoDB核心特性:事务,ACID,锁,隔离级别,redo,undo,MVCC ,幻读,脏读,不可重复读,碎片整理怎么做的?
二进制日志格式都有哪些? 你对二进制日志操作过什么?
你们公司的备份策略怎么设计的? 你备份一次多长时间? MDP 怎么实现的热备功能,XBK备份原理是什么?
全备很大,一个非常小的表损坏了,你的快速恢复思路是什么?
主从复制原理,主从怎么监控,怎么排查故障,怎么排查延时问题.你对降低主从延时有什么好的建议和方案?
second behind master 怎么算出来?
延时从库是干什么用的? 半同步复制原理? 增强半同步,无损复制原理,MGR组复制原理? Paxos原理?
GTID复制和传统复制的区别?
MHA Failover原理,PXC工作原理?
你对分布式架构的理解?
Redis: 持久化方式,数据类型,事务进行说明?
redis sentinel 高可用集群的工作原理,redis Cluster的工作原理?
MongoDB replicationSet工作原理(raft分布式一致协议),Sharding CLuster工作原理.
18.你都做过哪些优化?
PT工具都用户哪些 ?
用过哪些压力测试工具?
你对Oracle(安装,网络管理,文件管理,表空间,备份恢复,DG,RAC)了解吗?Pg(安装,基本管理,备份恢复,集群)了解吗?
你对TiDB了解吗?
你对云数据库了解吗?
你对Docker,K8s了解吗?

本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系:hwhale#tublm.com(使用前将#替换为@)

运维工程师之-MySQL的故障问题总结 的相关文章

  • SQL 解析与执行流程

    一 前言 在先前的技术博客中 我们已经详细介绍过数据库的 parser 模块与执行流程 用户输入的 SQL 语句通过词法解析器生成 token 再通过语法分析器生成抽象语法树 AST 经过 AST 生成对应的 planNode 最后执行 p
  • Qt源码分析:Qt程序是怎么运行起来的?

    一 从 exec 谈起 一个标准的Qt gui程序 在启动时我们会coding如下几行简洁的代码 include widget h include
  • 拼多多详情API开启运营比价新纪元

    随着互联网的快速发展 电商行业正在迅速崛起 拼多多作为一家新兴的电商平台 凭借其独特的营销策略和创新的商业模式 成为了电商行业的一匹黑马 在拼多多的成功背后 其详情API接口营销起到了至关重要的作用 本文将详细介绍拼多多详情API接口营销的
  • AntDB内存管理之内存上下文之内存上下文机制是怎么实现的

    4 内存上下文机制是怎么实现的 下文将针对内存上下文机制进行代码说明 本次以AntDB的代码为例 来解析内存上下文的实现方式 4 1 最基础的数据结构 MemoryContextData和MemoryContextMethods是内存上下文
  • 【计算机毕业设计】病房管理系统

    当下 如果还依然使用纸质文档来记录并且管理相关信息 可能会出现很多问题 比如原始文件的丢失 因为采用纸质文档 很容易受潮或者怕火 不容易备份 需要花费大量的人员和资金来管理用纸质文档存储的信息 最重要的是数据出现问题寻找起来很麻烦 并且修改
  • 【计算机毕业设计】实验室预约管理

    身处网络时代 随着网络系统体系发展的不断成熟和完善 人们的生活也随之发生了很大的变化 人们在追求较高物质生活的同时 也在想着如何使自身的精神内涵得到提升 而读书就是人们获得精神享受非常重要的途径 为了满足人们随时随地只要有网络就可以看书的要
  • 【计算机毕业设计】校园体育赛事管理系统

    身处网络时代 随着网络系统体系发展的不断成熟和完善 人们的生活也随之发生了很大的变化 人们在追求较高物质生活的同时 也在想着如何使自身的精神内涵得到提升 而读书就是人们获得精神享受非常重要的途径 为了满足人们随时随地只要有网络就可以看书的要
  • 基于java的学生宿舍管理系统设计与实现

    基于java的学生宿舍管理系统设计与实现 I 引言 A 研究背景和动机 基于Java的学生宿舍管理系统设计与实现的研究背景和动机 在数字化时代的推动下 学生宿舍管理系统已经成为了管理学生宿舍的重要工具 学生宿舍管理系统能够帮助管理者更好地管
  • 基于java的饮食分享平台系统设计与实现

    基于java的饮食分享平台系统设计与实现 I 引言 A 研究背景和动机 近年来 随着人们生活水平的提高和健康意识的增强 饮食健康已经成为越来越多人的关注焦点 因此 一个方便快捷的饮食分享平台就显得尤为重要 基于Java的饮食分享平台系统设计
  • 【计算机毕业设计】二手图书交易系统

    随着世界经济信息化 全球化的到来和互联网的飞速发展 推动了各行业的改革 若想达到安全 快捷的目的 就需要拥有信息化的组织和管理模式 建立一套合理 动态的 交互友好的 高效的二手图书交易系统 当前的信息管理存在工作效率低 工作繁杂等问题 基于
  • 【计算机毕业设计】二手家电管理平台

    时代在飞速进步 每个行业都在努力发展现在先进技术 通过这些先进的技术来提高自己的水平和优势 二手家电管理平台当然不能排除在外 二手家电管理平台是在实际应用和软件工程的开发原理之上 运用java语言以及前台VUE框架 后台SpringBoot
  • 2024诸多大厂春招提前启动!Android的程序员还在等什么

    春招 提前批 已开 xdm别打瞌睡了 格力 顺丰 酷狗 沃尔玛中国 理想 科大讯飞等开启春招 开始收简历了 还有hc的企业提前抢人 春招时间短 节奏快 招满即止 就算挂了也绝不能不投 对企业来说 秋招和春招都是储备人才的黄金时期 春招中 除
  • 不要再苦苦寻觅了!AI 大模型面试指南(含答案)的最全总结来了!

    AI 大模型技术经过2023年的狂飙 2024年必将迎来应用的落地 对 IT 同学来讲 这里蕴含着大量的技术机会 越来越多的企业开始招聘 AI 大模型岗位 本文梳理了 AI 大模型开发技术的面试之道 从 AI 大模型基础面 AI 大模型进阶
  • (2024最新整理)Java最全八股文及答案!

    Java的特点 Java是一门面向对象的编程语言 面向对象和面向过程的区别参考下一个问题 Java具有平台独立性和移植性 Java有一句口号 Write once run anywhere 一次编写 到处运行 这也是Java的魅力所在 而实
  • 史上最全Java面试八股文(带全部答案)2024年最新版

    今天要谈的主题是关于求职 求职是在每个技术人员的生涯中都要经历多次 对于我们大部分人而言 在进入自己心仪的公司之前少不了准备工作 有一份全面细致 面试题 将帮助我们减少许多麻烦 在跳槽季来临之前 特地做这个系列的文章 一方面帮助自己巩固下基
  • 温室气体排放更敏感的模型(即更高的平衡气候敏感性(ECS))在数年到数十年时间尺度上也具有更高的温度变化(Python代码实现)

    欢迎来到本博客 博主优势 博客内容尽量做到思维缜密 逻辑清晰 为了方便读者 座右铭 行百里者 半于九十 本文目录如下 目录 1 概述 2 运行结果 3 参考文献 4 Python代码 数据
  • 温室气体排放更敏感的模型(即更高的平衡气候敏感性(ECS))在数年到数十年时间尺度上也具有更高的温度变化(Python代码实现)

    欢迎来到本博客 博主优势 博客内容尽量做到思维缜密 逻辑清晰 为了方便读者 座右铭 行百里者 半于九十 本文目录如下 目录 1 概述 2 运行结果 3 参考文献 4 Python代码 数据
  • 2024最强Java面试八股文合集(持续更新)

    今天要谈的主题是关于求职 求职是在每个技术人员的生涯中都要经历多次 对于我们大部分人而言 在进入自己心仪的公司之前少不了准备工作 有一份全面细致 面试题 将帮助我们减少许多麻烦 在跳槽季来临之前 特地做这个系列的文章 一方面帮助自己巩固下基
  • 深入解析 YAML 配置文件:从语法到最佳实践

    一 认识YAML YAML YAML Ain t Markup Language 是一种人类可读的数据序列化语言 它的设计目标是使数据在不同编程语言之间交换和共享变得简单 YAML采用了一种简洁 直观的语法 以易于阅读和编写的方式表示数据结
  • Python 使用 NoSQL 数据库的优选方案

    NoSQL 数据库因其高性能 可扩展性和灵活性而风靡一时 然而 对于 Python 程序员而言 选择合适的 NoSQL 数据库可能会令人困惑 因为有多种选择可供选择 那么 哪种 NoSQL 数据库最适合 Python 呢 2 解决方案 根据

随机推荐