搜索菜单
当前位置: 首页 > SQL > MySQL运维：Memcached服务、Binlog清理与主从同步修复Shell脚本

MySQL运维：Memcached服务、Binlog清理与主从同步修复Shell脚本

林见深
林见深
发布时间：2026-10-13 | 4人浏览过
原创

本文整理了一套针对MySQL及其关联服务的实用Linux Shell脚本，涵盖Memcached守护进程管理、基于主从健康检查的Binlog自动清理，以及针对中继日志异常的同步故障修复，旨在简化数据库日常运维操作。

结果或目标

通过脚本实现以下自动化功能：
1. Memcached服务标准化：利用标准Linux init.d接口管理服务生命周期。
2. Binlog安全清理：在确保主从数据完全同步的前提下，精准清理过期的Master Binlog以释放磁盘空间。
3. 主从同步修复：当发生中继日志错误导致同步中断时，自动定位源文件并重设同步起点，减少人工干预。

准备条件

  • 具有 root 权限的 Linux 服务器（CentOS/RHEL系列为例）。
  • Memcached环境：已编译安装至 /usr/local/memcached/bin/memcached。
  • MySQL主从环境：需配置好一主多从架构，且从库具备访问主库的权限。
  • 账户配置：Binlog清理脚本需要从库创建专用同步账号 check_binlog，密码 binlog_2356，并确保主库允许该IP访问。

真实操作顺序

第1步：部署 Memcached 启动脚本

目的：将 Memcached 纳入系统标准服务管理，支持开机自启和 status 查看。

  1. 编辑脚本
    使用编辑器打开 /etc/init.d/memcached：
# vim /etc/init.d/memcached

粘贴以下内容（注意参数可根据实际IP修改）：

#!/bin/bash
#=======================================================================================
# chkconfig: - 80 12
# description: Distributed memory caching daemon
# processname: memcached
#=======================================================================================
IPADDR=`/sbin/ifconfig eth1 | awk -F ':' '/inet addr/{print $2}' | sed 's/[a-zA-Z ]//g'`
PORT="11211"
USER="root"
SIZE="2048"
CONNNUM="51200"
PIDFILE="/var/run/memcached.pid"
BINFILE="/usr/local/memcached/bin/memcached"
LOCKFILE="/var/lock/subsys/memcached"
RETVAL=0
      
start() {
  echo -n $"Starting memcached......"
  $BINFILE -d -l $IPADDR -p $PORT -u $USER -m $SIZE -c $CONNNUM -P $PIDFILE
  RETVAL=$?
  echo
  [ $RETVAL -eq 0 ] && touch $LOCKFILE
        
  return $RETVAL
}
      
stop() {
  echo -n $"Shutting down memcached......"
  /sbin/killproc $BINFILE
  RETVAL=$?
  echo
  [ $RETVAL -eq 0 ] && rm -f $LOCKFILE
        
  return $RETVAL
}
      
restart() {
  stop
  sleep 1
  start
}
      
reload() {
  echo -n $"Reloading memcached..."
  /sbin/killproc $BINFILE -HUP
  RETVAL=$?
  echo
        
  return $RETVAL
}
      
case "$1" in
start)
  start
  ;;
        
stop)
  stop
  ;;
        
restart)
  restart
  ;;
        
condrestart)
  [ -e $LOCKFILE ] && restart
  RETVAL=$?
  ;;
        
reload)
  reload
  ;;
        
status)
  status $prog
  RETVAL=$?
  ;;
        
*)
  echo "Usage: $0 {start|stop|restart|condrestart|status}"
  RETVAL=1
esac
exit $RETVAL
  1. 赋予执行权限并注册为服务
# chmod +x /etc/init.d/memcached
# chkconfig --add memcached
# chkconfig --level 235 memcached on
# service memcached start

第2步：实施 MySQL Binlog 自动清理

目的：仅在确认从库完全追上主库日志后删除 Binlog，保障数据安全。

  1. 创建目录与脚本文件
# mkdir -p /data/scripts
# mkdir -p /data/logs
# vim /data/scripts/delete_mysql_binlog.sh

输入脚本内容如下，重点监控 Master_Log_File 与 Relay_Master_Log_File 的状态：

#!/bin/bash
#=======================================================================================
#  用于删除 MySQL Master 端已经同步完的 binlog【需在 Master 端运行】，以减少磁盘空间
#  每天凌晨 5:30 分运行一次
#
#  注：需在 Slave 端添加允许 Master 端访问的帐号【帐号：check_binlog，密码：binlog_2356】
#     运行于 MySQL Master 端【目前只用于一主一从的同步模式，对于多从的情况暂时未考虑】
#=======================================================================================
PATH=/sbin:/bin:/usr/sbin:/usr/bin:/usr/local/sbin:/usr/local/bin
   
## Slave端连接信息
SLAVE_ADDR="XXX.XXX.XXX.XXX"
SLAVE_USER="check_binlog"
SLAVE_PWD="binlog_2356"
   
LOGFILE="/data/logs/db_sync_info.log"
PINGFILE="/tmp/mysqlping.log"
   
## MySQL状态信息查看命令
SQLCMD="show slave status"
   
#=======================================================================================
## 检查MySQL是否已经运行
if [[ `ps aux | grep mysql[d] | wc -l` -eq 0 ]]; then
  echo The MySQL is not running at: `date +%F" "%H-%M-%S` >> ${LOGFILE}
  exit 1
fi
   
## 测试Slave端的连通性
nohup mysqladmin -h${SLAVE_ADDR} -u${SLAVE_USER} -p${SLAVE_PWD} ping > ${PINGFILE}
retval=`grep "^error" ${PINGFILE}`
rm -f ${PINGFILE}
if [[ "${retval}X" != "X" ]]; then
  echo The MySQL Slave can not be connected at: `date +%F" "%H-%M-%S` >> ${LOGFILE}
  exit 1
fi
   
## 检查是否合法的Slave
MASTER_ADDR=`mysql -h${SLAVE_ADDR} -u${SLAVE_USER} -p${SLAVE_PWD} -e "${SQLCMD}\G;" | awk '$1=="Master_Host:" {print $2}'`
LOCAL_ADDR=`/sbin/ifconfig eth1 | awk -F ':' '/inet addr/{print $2}' | sed 's/[a-zA-Z ]//g'`
if [[ "${MASTER_ADDR}" != "${LOCAL_ADDR}" ]]; then
  echo The MySQL Slave is not lawful at: `date +%F" "%H-%M-%S` >> ${LOGFILE}
  exit 1
fi
   
## 获得Slave端信息，以此来确定是否处于正常同步的情况
IO_STATUS=`mysql -h${SLAVE_ADDR} -u${SLAVE_USER} -p${SLAVE_PWD} -e "${SQLCMD}\G;" | awk '$1=="Slave_IO_Running:" {print $2}'`
SQL_STATUS=`mysql -h${SLAVE_ADDR} -u${SLAVE_USER} -p${SLAVE_PWD} -e "${SQLCMD}\G;" | awk '$1=="Slave_SQL_Running:" {print $2}'`
if [[ "${IO_STATUS}" != "Yes" || "${SQL_STATUS}" != "Yes" ]]; then
  echo The MySQL Replication is not synchronous at: `date +%F" "%H-%M-%S` >> ${LOGFILE}
  exit 1
fi
   
## 再做一次判断，以保证数据同步绝对正常【创建测试数据】
mysql -uroot -e "create database if not exists mytestdb;"
sleep 3
   
retval=`mysql -h${SLAVE_ADDR} -u${SLAVE_USER} -p${SLAVE_PWD} -e "show databases;" | grep mytestdb`
mysql -uroot -e "drop database if exists mytestdb;"
if [[ "${retval}X" = "X" ]]; then
  echo The MySQL Replication is not synchronous at: `date +%F" "%H-%M-%S` >> ${LOGFILE}
  exit 1
fi
   
## 在已经同步的情况，还需要判断当前同步的binlog，以此来确定哪些已经是过期的binlog
SLAVE_BINLOG1=`mysql -h${SLAVE_ADDR} -u${SLAVE_USER} -p${SLAVE_PWD} -e "${SQLCMD}\G;" | awk '$1=="Master_Log_File:" {print $2}'`
SLAVE_BINLOG2=`mysql -h${SLAVE_ADDR} -u${SLAVE_USER} -p${SLAVE_PWD} -e "${SQLCMD}\G;" | awk '$1=="Relay_Master_Log_File:" {print $2}'`
## 获得Master端，当前的binlog文件以及binlog路径
MASTER_BINLOG=`mysql -uroot -e "show master status;" | grep -v '^+' | tail -1 | awk '{print $1}'`
   
## 主从端已经同步到相同的binlog
if [[ "${SLAVE_BINLOG1}" = "${SLAVE_BINLOG2}" && "${SLAVE_BINLOG1}" = "${MASTER_BINLOG}" ]]; then
  CURR_BINLOG="${MASTER_BINLOG}"
     
## 主从端已经同步，但从端的binlog还没有追赶到主端最新的binlog
elif [[ "${SLAVE_BINLOG1}" = "${SLAVE_BINLOG2}" && "${SLAVE_BINLOG1}" != "${MASTER_BINLOG}" ]]; then
  CURR_BINLOG="${SLAVE_BINLOG1}"
     
## 主从端已经同步，主从端的binlog一致，但relaylog还不一致
elif [[ "${SLAVE_BINLOG1}" != "${SLAVE_BINLOG2}" && "${SLAVE_BINLOG1}" = "${MASTER_BINLOG}" ]]; then
  CURR_BINLOG="${SLAVE_BINLOG2}"
     
else
  echo Has noknown error at：`date +%F" "%H-%M-%S` >> ${LOGFILE}
  exit 1
fi
   
mysql -uroot -e "purge binary logs to '${CURR_BINLOG}';"
if [[ $? -eq 0 ]]; then
  echo Clear MySQL binlog is ok at: `date +%F" "%H-%M-%S` >> ${LOGFILE}
fi
  1. 设置 Crontab 定时任务
# crontab -e 
30 05 * * * /data/scripts/delete_mysql_binlog.sh >/dev/null 2>&1

第3步：处理 MySQL 主从不同步故障

目的：解决因中继日志损坏导致的同步停滞。此操作风险较高，会强制重新建立同步连接。

  1. 编写修复脚本
#!/bin/sh
PATH=/sbin:/bin:/usr/sbin:/usr/bin:/usr/local/sbin:/usr/local/bin
  
LOGFILE=/data/repair_mysql_sync_`date +%F`.log
SQLCMD1="show slave status"
  
## 查看MySQL是否已启动
if [[ `ps aux | grep mysqld | grep -v grep`"X" = "X" ]]; then
  echo The MySQL is not running at: `date +%F" "%H-%M-%S` >> ${LOGFILE}
  exit 1
fi
  
## 获得MySQL从端Relay binlog的路径
retval=`grep "^relay-log" /etc/my.cnf | grep -v relay-log- | grep '/'`
if [[ "${retval}" = "X" ]]; then
  RELAY_BINLOG_PATH=`ps aux | grep -w mysqld | grep -v grep | awk '{print $13}' | awk -F '=' '{print $2}'`
else
  RELAY_BINLOG_PATH=`dirname $(echo ${retval} | awk -F '=' '{print $2}')`
fi
  
## 查找master.info文件，用于定位Binlog信息
MASTER_FILE=`ps aux | grep -w mysqld | grep -v grep | awk '{print $13}' | awk -F '=' '{print $2}'`/master.info
if [[ ! -e ${MASTER_FILE} ]]; then
  echo This Server is not MySQL Slave at: `date +%F" "%H-%M-%S` >> ${LOGFILE}
  exit 1
fi
  
## 获得当前的同步状态
IO_STATUS=`mysql -uroot -e "${SQLCMD1}\G;" | awk '$1=="Slave_IO_Running:" {print $2}'`
SQL_STATUS=`mysql -uroot -e "${SQLCMD1}\G;" | awk '$1=="Slave_SQL_Running:" {print $2}'`
if [[ "${IO_STATUS}" = "Yes" && "${SQL_STATUS}" = "Yes" ]]; then
  echo Now, The MySQL Replication is synchronous at: `date +%F" "%H-%M-%S` >> ${LOGFILE}
  exit 0
fi
  
## 从master.info文件中，获得MySQL主端的同步信息
REPLI_INFO=`sed '/^$/d' ${MASTER_FILE} | tail +2 | head -5`
REPLI_BINLOG_FILE=`echo ${REPLI_INFO} | awk '{print $1}'`
REPLI_IPADDR=`echo ${REPLI_INFO} | awk '{print $3}'`
REPLI_USER=`echo ${REPLI_INFO} | awk '{print $4}'`
REPLI_PWD=`echo ${REPLI_INFO} | awk '{print $5}'`
  
## 删除无用的Relay binlog
rm -rf ${RELAY_BINLOG_PATH}/*-relay-bin.*
  
## 直接从0位置开始同步
SQLCMD2="change master to master_host='${REPLI_IPADDR}', master_user='${REPLI_USER}', master_password='${REPLI_PWD}',"
SQLCMD2="${SQLCMD2} master_log_file='${REPLI_BINLOG_FILE}', master_log_pos=0"
mysql -uroot -e "stop slave;"
mysql -uroot -e "${SQLCMD2};"
mysql -uroot -e "start slave;"
  
## 如果同步的过程中，出现重复记录导致同步失败，就跳过
while true
do
  sleep 2
  IO_STATUS=`mysql -uroot -e "${SQLCMD1}\G;" | awk '$1=="Slave_IO_Running:" {print $2}'`
  SQL_STATUS=`mysql -uroot -e "${SQLCMD1}\G;" | awk '$1=="Slave_SQL_Running:" {print $2}'`
  BEHIND_STATUS=`mysql -uroot -e "${SQLCMD1}\G;" | awk '$1=="Seconds_Behind_Master:" {print $2}'`
  SLAVE_BINLOG1=`mysql -uroot -e "${SQLCMD1}\G;" | awk '$1=="Master_Log_File:" {print $2}'`
  SLAVE_BINLOG2=`mysql -uroot -e "${SQLCMD1}\G;" | awk '$1=="Relay_Master_Log_File:" {print $2}'`
    
  ## 出现错误，就将错误信息记录到日志文件，并跳过错误继续同步
  if [[ "${IO_STATUS}" != "Yes" || "${SQL_STATUS}" != "Yes" ]]; then
    ERRORINFO=`mysql -uroot -e "${SQLCMD1}\G;" | awk -F ': ' '$1=="Last_Error" {print $2}'`
    echo "The MySQL synchronous error information: ${ERRORINFO}" >> ${LOGFILE}
    mysql -uroot -e "stop slave;"
    mysql -uroot -e "set GLOBAL SQL_SLAVE_SKIP_COUNTER=1;"
    mysql -uroot -e "start slave;"
      
  ## 已完成同步，就正常退出
  elif [[ "${IO_STATUS}" = "Yes" && "${SQL_STATUS}" = "Yes" && "${SLAVE_BINLOG1}" = "${SLAVE_BINLOG2}" && ${BEHIND_STATUS} -eq 0 ]]; then
    echo The MySQL synchronous is ok at: `date +%F" "%H-%M-%S` >> ${LOGFILE}
    break
  fi
done

将此脚本保存为 /data/scripts/repair_mysql_sync.sh 并赋予执行权限。遇到报错时建议在业务低峰期手动触发验证。

完成判断

  • Memcached 可正常通过 service memcached status 查看状态。
  • 观察 /data/logs/db_sync_info.log，若显示“Clear MySQL binlog is ok”即表示清理成功。
  • 在修复脚本运行时，通过 show slave status\G 观察 Seconds_Behind_Master 归零且两个 Running 均为 Yes，说明修复生效。

原文有依据的排错

  • IPv4 获取方式受限：脚本中使用 /sbin/ifconfig eth1 ... 提取 IP，在新版 CentOS/RHEL 中 ifconfig 可能已被废弃，若获取不到 IP，请替换为 ip addr 相关命令。
  • 同步重试逻辑：修复脚本中采用 set GLOBAL SQL_SLAVE_SKIP_COUNTER=1; 跳过错误。这适用于非事务型或允许少量丢失的场景。如果是强一致性要求高的业务，跳过会导致数据不一致，此时需谨慎评估是否适用。

简要总结

上述三个脚本涵盖了缓存管理、存储维护和数据同步恢复的关键场景，适合拥有自有部署环境的开发者或DBA参考使用。注意在生产环境使用前，务必根据实际的网卡名称、路径及数据库版本进行测试。

以上就是MySQL的一些功能实用的Linux shell脚本分享详细内容，更多关于MySQL运维资料请关注本站其它相关文章！

相关文章

相关标签: SQL Shell MySQL Linux

本站声明

本文内容仅供参考，不代表本站观点。转载或引用请注明出处。如发现内容问题，请通过联系我们页面反馈。

作者最新文章

全部内容

Python 相关产品和应用

全部下载
Python Selenium
Selenium

Selenium

4.51.0 · Windows

用于浏览器自动化和 Web 测试的 Python 工具。
Python 机器学习
scikit-learn

scikit-learn

1.9.1 · Windows

常用 Python 机器学习算法与模型评估工具库。
Python 代码质量
Black

Black

26.10.1 · Windows

强调一致性的 Python 自动代码格式化工具。
Python 代码质量
Ruff

Ruff

0.17.1 · macOS

由 Rust 编写的高速 Python 代码检查和格式化工具。
Python pytest
pytest

pytest

9.1.1 · Windows

简洁而强大的 Python 自动化测试框架。
Python FastAPI API
FastAPI

FastAPI

0.146.0 · Windows

高性能 Python API 框架，支持类型提示和自动接口文档。
Python Flask Web开发
Flask

Flask

3.1.3 · Windows

轻量灵活的 Python Web 应用框架。
Python Django Web开发
Django

Django

6.1.2 · Windows

成熟的 Python Web 框架，适合构建内容站点和业务系统。
Python Spyder
Spyder

Spyder

6.1.7 · Windows

面向科学计算与数据分析的 Python 集成开发环境。
Python SciPy
SciPy

SciPy

1.18.1 · Windows

面向科学、工程和技术计算的 Python 算法库。
Python Pandas 数据分析
pandas

pandas

3.0.6 · Windows

Python 数据分析库，提供 DataFrame 与丰富的数据处理能力。
Python NumPy
NumPy

NumPy

2.5.4 · Windows

Python 科学计算基础库，提供高性能多维数组与数值运算。

文章分类

专题列表

ipython.cn 学习网
人工智能 Java AI行业服务