linux使用mysqldump+expect+crontab实现mysql周期冷备份思路详解

一、遇到的问题

我们使用过mysqldump都知道，使用该命令后，需要我们手动输入 mysql的密码，那么我们就不能够直接在crontab中使用mysqldump实现周期备份。其实我们可以使用expect脚本自动输入密码，从而实现真正的周期备份。如果你不知道什么是expect，建议先请看这篇文章：https://blog.csdn.net/lendsomething/article/details/109066545

二、思路

  1. 创建一个utils文件，里面存放shell脚本，包括mysqldump、scp等命令
  2. 使用expect脚本，执行utils内的脚本，并为其自动输入密码
  3. 最后使用驱动脚本，执行expect，在该脚本里面传入需要的参数

思路如下：

三、代码

3.1、单机冷备份

（1）mysqldump的shell脚本
backup.sh:

#!/bin/bash

mysql_username=$1
backup_databases=$2
backup_path=$3

mysqldump -u ${mysql_username} -p --databases ${backup_databases} > ${backup_path}

（2）执行mysqldump的expect脚本，能帮助我们自动输入mysql代码
single_cold_backup_service.exp:

#!/usr/bin/expect

set timeout 5

#设置本机信息
set mysql_username [lindex $argv 0]
set backup_database [lindex $argv 1]
set backup_path [lindex $argv 2] 

#utils路径
set utils_path /home/hadoop/backup_script/utils

spawn bash ${utils_path}/backup.sh ${mysql_username} ${backup_database} ${backup_path}

expect {
	"*assword*" {send "nimabidecao1\r"} #输入密码
}
expect eof

（3）驱动脚本，执行expect，这里可以传入需要的参数
single_cold_backup_service_driver.sh：

#!/bin/bash

#这里的数据就可以写死了
mysql_username=root
backup_databases=school
backup_path=$HOME/backup_data/${backup_databases}.sql

#运行expect脚本
expect $HOME/backup_script/single_cold_backup/single_cold_backup_service.exp ${mysql_username} ${backup_databases} ${backup_path}

这里一定要十分注意自己的路径，强烈建议使用绝对路径来执行

（4）使用crontab周期执行驱动脚本
进入crontab编辑：crontab -e
输入如下内容：

0 9 * * 1 bash /home/hadoop/backup_script/single_cold_backup/single_cold_backup_driver.sh

意思为：每周1早上9点执行一次备份
若你想确定自己想要的时间，可以到这个网址：https://crontab-generator.org/ 去点选自己想要的时间

3.2、双机冷备份

（1）复制远程文件，用于拷贝本地机的mysql备份文件
scp.sh:

#!/bin/bash

local_backup_path=$1
another_user=$2
another_ip=$3
another_backup_path=$4

scp ${local_backup_path} ${another_user}@${another_ip}:${another_backup_path}

（2）执行mysqldump的expect脚本，能帮助我们自动输入mysql代码
double_cold_backup_service.exp:

#!/usr/bin/expect

set timeout 5

#主机信息
set mysql_username [lindex $argv 0]
set backup_database [lindex $argv 1]
set backup_path [lindex $argv 2] 

#从机信息
set slave_user [lindex $argv 3]
set slave_ip [lindex $argv 4]
set slave_backup_path [lindex $argv 5]

#utils路径
set utils_path /home/hadoop/backup_script/utils

spawn bash ${utils_path}/backup.sh ${mysql_username} ${backup_database} ${backup_path}

expect {
	"*assword*" {send "nimabidecao1\r"} #输入密码
}

spawn bash ${utils_path}/scp.sh ${backup_path} ${slave_user} ${slave_ip} ${slave_backup_path}

expect {
    "*assword*" {send "nimabidecao1\r"} #输入密码
}

expect eof

（3）驱动脚本，执行expect，这里可以传入需要的参数
double_cold_backup_service_driver.sh：

#!/bin/bash

#本机信息
mysql_username=root
backup_databases=school
backup_path=$HOME/backup_data/${backup_databases}.sql

#从机信息
slave_user=meizhaowei
slave_ip=172.20.10.14
slave_backup_path=backup_data/doule_cold_backup_data/${backup_databases}.sql

#执行写绝对路径
expect $HOME/backup_script/double_cold_backup/double_cold_backup_service.exp ${mysql_username} ${backup_databases} ${backup_path} ${slave_user} ${slave_ip} ${slave_backup_path}

（4）使用crontab周期执行驱动脚本

0 9 * * 1 bash /home/hadoop/backup_script/double_cold_backup/double_cold_backup_driver.sh

意思是：每周1早上9点执行一次备份

到此这篇关于linux使用mysqldump+expect+crontab实现mysql周期冷备份思路详解的文章就介绍到这了,更多相关mysql周期冷备份内容请搜索我们以前的文章或继续浏览下面的相关文章希望大家以后多多支持我们！

赞 (0)

相关推荐

  • Linux中mysqldump命令实例详解

    mysqldump是mysql数据库中备份工具,用于将MYSQL服务器中的数据库以标准的sql语言的方式导出,并保存到文件中. 语法: mysqldump (选项) 选项: --add-drop-table :在每个创建数据表语句前添加删除数据库的语句  --add-locks:备份数据库表时锁定数据库表  --all-databases:备份mysql服务器上的所有数据库  --comments:添加注释信息  --compact:压缩模式,产生更少的输出  --complete-insert

  • 详谈mysqldump数据导出的问题

    1,使用mysqldump时报错(1064),这个是因为mysqldump版本太低与当前数据库版本不一致导致的. mysqldump: Couldn't execute 'SET OPTION SQL_QUOTE_SHOW_CREATE=1': You have an error in your SQL syntax; check the manual that corresponds to your MySQL server version for the right syntax to us

  • mysqldump备份数据库时排除某些库的实例

    说明: 使用mysqldump –all-databases会导出所有库.但如果做主从,从主库dump出数据时,我们是不需要也不想要information_schema 和 mysql 库的.数据库少的情况下还可以通过/usr/local/mysql/bin/mysqldump -uroot -p --databases db1 db2 > db1db2.sql 这样再导出,但如果数据多,这样指定就很麻烦了. mysql是支持 ignore-table 的,但是没有ignore-database

  • 详解 linux mysqldump 导出数据库、数据、表结构

    详解 linux mysqldump 导出数据库.数据.表结构 导出完整的数据库备份: mysqldump -h127.0.0.1 -P3306 -uroot -ppassword --add-locks -q dbname > dbname.sql 说明:--add-locks:导出过程中锁定表,完成后回解锁.-q:不缓冲查询,直接导出至标准输出 导出完整的数据库表结构 : mysqldump -h127.0.0.1 -P3306 -uroot -ppassword --add-locks -

  • linux使用mysqldump+expect+crontab实现mysql周期冷备份思路详解

    一.遇到的问题 我们使用过mysqldump都知道,使用该命令后,需要我们手动输入 mysql的密码,那么我们就不能够直接在crontab中使用mysqldump实现周期备份.其实我们可以使用expect脚本自动输入密码,从而实现真正的周期备份.如果你不知道什么是expect,建议先请看这篇文章:https://blog.csdn.net/lendsomething/article/details/109066545 二.思路 创建一个utils文件,里面存放shell脚本,包括mysqldum

  • mysql过滤复制思路详解

    mysql过滤复制思路详解

    目录 mysql过滤复制 主库上实现 从库上实现 一些问题 mysql过滤复制 两种思路: 主库的binlog上实现(不推荐,尽量保证主库binlog完整) 从库的sql线程上实现 所以主从过滤复制尽量不用,要用的也仅仅在从库上使用,因为要尽可能保证binlog的完整性 主库上实现 在Master 端为保证二进制日志的完整, 不使用二进制日志过滤. 主库配置参数: #配置文件中添加 binlog-do-db=db_name #定义白名单,仅将制定数据库的相关操作记入二进制日志.如果主数据库崩溃,

  • Linux手动部署远程的mysql数据库的方法详解

    一.安装mysql 运行以下命令更新YUM源. rpm -Uvh  http://dev.mysql.com/get/mysql57-community-release-el7-9.noarch.rpm 运行以下命令安装MySQL. yum -y install mysql-community-server 运行以下命令查看MySQL版本号. mysql -V 返回结果如下,表示MySQL安装成功. mysql  Ver 14.14 Distrib 5.7.31, for Linux (x86_

  • linux上免安装版MySQL5.7.18的教程详解

    1. 下载mysql 从官网下载mysql的压缩包    mysql-5.7.18-linux-glibc2.5-x86_64.tar.gz 2 把下载的包上传到linux上,先安装下依赖包:Ubuntu用 apt-get install libaio*    centOS用yum install libaio* 3 用tar -xzvf mysql-5.7.18-linux-glibc2.5-x86_64.tar.gz 解压 改名并移动到/usr/local  下:mv mysql-5.7.1

  • Mysql my.ini 配置文件详解

    Mysql my.ini 配置文件详解 #BEGIN CONFIG INFO #DESCR: 4GB RAM, 只使用InnoDB, ACID, 少量的连接, 队列负载大 #TYPE: SYSTEM #END CONFIG INFO # # 此mysql配置文件例子针对4G内存 # 主要使用INNODB #处理复杂队列并且连接数量较少的mysql服务器 # # 将此文件复制到/etc/my.cnf 作为全局设置, # mysql-data-dir/my.cnf 作为服务器指定设置 # (@loc

  • MySql安装及登录详解

    检查Linux系统中是否已经安装了MySQL sudo service mysql start //尝试打开MySQL服务 提示: mysql: unrecongized service //说明系统没有MySQL 则需要 //安装MySQL服务器.核心程序 sudo apt-get install mysql-server //安装MySQL客户端 sudo apt-get install mysql-client 验证 sudo netstat -tap|grep mysql(注意前面是ne

  • Maven 配置文件 生命周期 常用命令详解

    当前,JVM生态圈主要的三大构建工具: Apache Ant(带着Ivy) Maven Gradle 对于初学者,Ant是最清晰的,只要读懂Xml配置文件你就能够理解它干了什么,但是ant文件很容易变的更加复杂.Maven有自己的工程目录规则和内置的构建生成周期,从而使构建文件更加简单.gradle有很多开箱即用的插件,语法更加短小精悍,易于理解. 在讲解maven之前这里我们先简单比较下Maven和Ant.下面是一个简单的Ant例子.这个例子可以看出我们需要明确的告诉Ant.我们想让他做什么.

  • navicat创建MySql定时任务的方法详解

    navicat创建MySql 定时任务详解 事件(event)是MySQL在相应的时刻调用的过程式数据库对象.一个事件可调用一次,也可周期性的启动,它由一个特定的线程来管理的,也就是所谓的"事件调度器".事件和触发器类似,都是在某些事情发生的时候启动.当数据库上启动一条语句的时候,触发器就启动了,而事件是根据调度事件来启动的.由于他们彼此相似,所以事件也称为临时性触发器.事件取代了原先只能由操作系统的计划任务来执行的工作,而且MySQL的事件调度器可以精确到每秒钟执行一个任务,而操作系

  • PostgreSQL使用MySQL外表的步骤详解(mysql_fdw)

    浅谈 postgres不知不觉已经升到了版本13,记得两年前还是版本10,当然这中间一直期望着哪天能在项目中使用postgresql,现在已实现哈-: 顺带说一下:使用postgresql的原因是它的生态完整,还有一个很重要的点儿是速度快这个在第10版的时 这么说也许还为时过早, 但是在13这一版本下一点儿也不为过,真的太快了,我简单的用500w的数据做聚合,在不建立索引(主键除外)的情况下 执行一个聚合操作,postgres 的速度是mysql的8倍,真的太快了-:好了,这一章节我就聊一聊我实

  • MySQL COUNT(*)性能原理详解

    目录 前言 1.COUNT(1).COUNT(*)与COUNT(字段)哪个更快? 实验分析 实验结果 实验结论 2.COUNT(*)与TABLES_ROWS 3.COUNT(*)是怎么样执行的? 4.总结 前言 在实际开发过程中,统计一个表的数据量是经常遇到的需求,用来统计数据库表的行数都会使用COUNT(*),COUNT(1)或者COUNT(字段),但是表中的记录越来越多,使用COUNT(*)也会变得越来越慢,今天我们就来分析一下COUNT(*)的性能到底如何. 1.COUNT(1).COUN

随机推荐