Ubuntu Linux定时备份数据库,并上传到阿里云OSS

生产环境中可能会遇到各种各样的问题,为了防止数据丢失和容灾,定时备份数据库就显得很重要了。本文使用crontab定时运行shell脚本,shell脚本中备份MySQL到本地并上传到阿里云OSS对象存储。

先看shell脚本(shell脚本处理了数据库备份,数据库备份同步上传云端,七天前数据库备份删除):

#!/bin/bash
#dbBackUp.sh //本shell脚本名
Now=$(date +"%Y%m%d_%H%M%S") #创建当前时间字符串,注意:等号前后不要有空格
sevenDaysAgo=`date +%F | sed 's/-//g'`
sevenDaysAgo=`expr $sevenDaysAgo - 7`
rm ./backup/price_$sevenDaysAgo* #移除七天之前的单库备份
rm ./backup/all_$sevenDaysAgo*  #移除七天之前的整库备份

#将price库备份并压缩到backup目录下,文件名为price_+时间
mysqldump -uuser -ppassword price | gzip > /home/ubuntu/learn/mysql/backup/price_$Now.sql.gz; 
#将MySQL中所有数据备份并压缩到backup目录下,文件名为all_+时间
mysqldump -uuser -ppassword --all-databases | gzip > /home/ubuntu/learn/mysql/backup/all_$Now.sql.gz

#执行上传操作,将备份文件同步到云端,存储在阿里云对象存储OSS中
NODE_ENV=$Now node /home/ubuntu/learn/mysql/upload.js

数据库备份文件上传到OSS,需要使用npm 安装ali-oss和co这两个库

/* upload.js */

var co = require('co');
var OSS = require('ali-oss');
var client = new OSS({
  region: 'oss-cn-beijing',//上传region节点,具体参照阿里云提供列表
  accessKeyId: 'AccessKeyID',
  accessKeySecret: 'AccessKeySecret';
});


co(function* (){
    client.useBucket('data-backup-by-xiaozhu');//上传到的Bucket名称
    var result = yield client.put('price_'+process.env.NODE_ENV+'.sql.gz','/home/ubuntu/learn/mysql/backup/price_'+process.env.NODE_ENV+'.sql.gz');
    var result2 = yield client.put('all_'+process.env.NODE_ENV+'.sql.gz','/home/ubuntu/learn/mysql/backup/all_'+process.env.NODE_ENV+'.sql.gz');
}).catch(function(err){
    console.log(err);
})

有时候数据库备份的文件会很庞大,对象存储空间很可能会被塞满,我们就需要定时清理,阿里云OSS允许用户对Bucket设置生命周期规则,以自动淘汰过期掉的文件,节省存储空间。用户可以同时设置多条规则

/* lifecycle.js */
/* 设置声明周期规则,自动回收七天之外的数据库备份 */
var co = require('co');
var OSS = require('ali-oss');
var client = new OSS({
  region: 'oss-cn-beijing',
  accessKeyId: 'AccessKeyID',
  accessKeySecret: 'AccessKeySecret'
});
co(function* () {
  var result = yield client.putBucketLifecycle('data-backup-by-xiaozhu', 'region', [
    { 
      id: 'rule1',   /*规则ID,用于标识一条规则,不能重复*/
      status: 'Enabled',   /*是否生效*/
      prefix: 'price_',    /*受影响的文件前缀,此规则只作用于符合前缀的文件*/
      days: 7   /*指定距文件最后修改时间N天过期*/
    },{
      id:'rule2',
      status:'Enabled',
      prefix:'all_',
      days:7
    }
  ]);
  console.log(result);
}).catch(function (err) {
  console.log(err);
});

shell脚本完成了数据库备份和备份清理的操作,还需要进行定时执行shell脚本的操作,我们可以使用crontab。执行crontab -e命令,添加以下内容。

如果第一次执行crontab会让选择使用什么编辑器来编辑,我们选择默认的nano即可。

30 1 * * * /bin/sh /home/ubuntu/learn/mysql/dbBackUp.sh
#每天1点30分 执行dbBackUp脚本

输入完成之后按ctrl + X 退出,退出之后按提示输入Y,然后回车即可保存。(命令行窗口下方提示的快捷键,^代表Ctrl,M代表Alt)

我们也可以直接编辑/etc/crontab来执行定时任务。区别为:crontab -e是某个用户的周期计划任务;/etc/crontab是系统的周期任务

猜你喜欢

转载自blog.csdn.net/w20101310/article/details/78874986