百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

编写脚本,实现对指定目录下所有文件备份,并压缩存到其他位置

nanshan 2025-05-15 20:02 2 浏览 0 评论

想象一下,你是一个运维工程师,负责管理一台生产服务器。某天凌晨,业务系统因为一次误操作删除了关键数据,老板怒气冲冲地找到你:“数据呢?备份呢?”如果你事先写好了一个备份脚本,定时运行,甚至还能压缩存储节省空间,那你就可以淡定地回复:“别慌,数据我已经备份好了。”这种底气,来自于你对工具的掌控和对细节的把控。

这个脚本的目标很简单:

  1. 指定一个源目录,扫描里面的所有文件。
  2. 将这些文件备份到目标位置。
  3. 用压缩工具打包备份,节省磁盘空间。
  4. 加上时间戳,让每次备份都有迹可循。

看似简单,但细节决定成败。我们会从基础命令讲起,一步步带你实现这个脚本。

准备工作:工具与环境

在动手之前,我们需要确保环境就绪。假设你用的是Linux系统(比如Ubuntu、CentOS),以下是我们会用到的工具和命令:

  • bash:Shell脚本的运行环境,通常Linux默认就是它。可以用echo $SHELL检查是否为/bin/bash
  • cp:用于复制文件和目录。
  • tar:经典的压缩工具,支持打包和压缩。
  • date:生成时间戳,方便追踪备份时间。
  • mkdir:创建目录。
  • ls:列出目录内容(虽然我们不常用它,但了解一下有备无患)。
  • find:查找文件的神器(稍后会用到)。

确保这些命令可用,运行which cp tar date mkdir ls find检查它们的路径。如果某个命令缺失,可以用包管理器安装(比如apt install taryum install tar)。


脚本设计:从需求到实现

我们先明确需求:

  • 输入:源目录路径(比如/var/www/data)。
  • 输出:备份文件,压缩后存到目标目录(比如/backup)。
  • 功能:备份所有文件,带时间戳,压缩为.tar.gz格式。
  • 额外要求:脚本要健壮,能处理目录不存在、权限不足等情况。

基于此,我们设计一个脚本,命名为backup.sh。以下是逐步实现的过程。


动手写脚本

1. 创建脚本文件并添加解释器

新建文件:

touch backup.sh
chmod +x backup.sh  # 赋予执行权限

用编辑器(比如vimnano)打开,写入第一行:

#!/bin/bash

这告诉系统用bash解释器运行脚本。

2. 定义变量

为了让脚本灵活,我们用变量存储路径和时间戳:

# 源目录(需要备份的目录)
SOURCE_DIR="/var/www/data"

# 目标目录(备份存储位置)
BACKUP_DIR="/backup"

# 当前时间戳,格式为年月日-时分秒,例如 20250330-143022
TIMESTAMP=$(date +"%Y%m%d-%H%M%S")

# 备份文件名
BACKUP_FILE="backup-$TIMESTAMP.tar.gz"
  • date +"%Y%m%d-%H%M%S":生成如20250330-143022的时间戳。%Y是年,%m是月,%d是日,%H是小时,%M是分钟,%S是秒。
  • 用变量的好处是后续修改路径或文件名时只需调整这里。

3. 检查目录是否存在

脚本不能假设一切顺利,我们得先检查目录:

# 检查源目录是否存在
if [ ! -d "$SOURCE_DIR" ]; then
    echo "错误:源目录 $SOURCE_DIR 不存在!"
    exit 1
fi

# 检查目标目录是否存在,不存在则创建
if [ ! -d "$BACKUP_DIR" ]; then
    echo "目标目录 $BACKUP_DIR 不存在,正在创建..."
    mkdir -p "$BACKUP_DIR"
    if [ $? -ne 0 ]; then  # 检查mkdir是否成功
        echo "错误:无法创建目标目录 $BACKUP_DIR,请检查权限!"
        exit 1
    fi
fi
  • [ ! -d "$SOURCE_DIR" ]-d测试目录是否存在,!取反,条件为真表示目录不存在。
  • exit 1:退出脚本,返回非零状态码表示失败。
  • mkdir -p:递归创建目录,即使父目录不存在也不会报错。
  • $?:上一个命令的退出状态,0表示成功,非0表示失败。

4. 执行备份与压缩

核心功能来了:备份并压缩。我们用tar命令一步到位:

echo "开始备份 $SOURCE_DIR 到 $BACKUP_DIR/$BACKUP_FILE ..."
tar -czf "$BACKUP_DIR/$BACKUP_FILE" -C "$SOURCE_DIR" .
if [ $? -eq 0 ]; then
    echo "备份成功!文件保存为:$BACKUP_DIR/$BACKUP_FILE"
else
    echo "错误:备份失败,请检查权限或磁盘空间!"
    exit 1
fi
  • tar -czf
  • -c:创建新归档文件。
  • -z:用gzip压缩。
  • -f:指定输出文件。
  • -C "$SOURCE_DIR" .:切换到源目录后打包当前目录(.)的内容,避免在压缩包中包含完整路径。
  • 检查$?确保备份成功。

5. 完整脚本

把以上部分合起来,backup.sh如下:

#!/bin/bash

# 源目录(需要备份的目录)
SOURCE_DIR="/var/www/data"

# 目标目录(备份存储位置)
BACKUP_DIR="/backup"

# 当前时间戳,格式为年月日-时分秒,例如 20250330-143022
TIMESTAMP=$(date +"%Y%m%d-%H%M%S")

# 备份文件名
BACKUP_FILE="backup-$TIMESTAMP.tar.gz"

# 检查源目录是否存在
if [ ! -d "$SOURCE_DIR" ]; then
    echo "错误:源目录 $SOURCE_DIR 不存在!"
    exit 1
fi

# 检查目标目录是否存在,不存在则创建
if [ ! -d "$BACKUP_DIR" ]; then
    echo "目标目录 $BACKUP_DIR 不存在,正在创建..."
    mkdir -p "$BACKUP_DIR"
    if [ $? -ne 0 ]; then
        echo "错误:无法创建目标目录 $BACKUP_DIR,请检查权限!"
        exit 1
    fi
fi

# 执行备份与压缩
echo "开始备份 $SOURCE_DIR 到 $BACKUP_DIR/$BACKUP_FILE ..."
tar -czf "$BACKUP_DIR/$BACKUP_FILE" -C "$SOURCE_DIR" .
if [ $? -eq 0 ]; then
    echo "备份成功!文件保存为:$BACKUP_DIR/$BACKUP_FILE"
else
    echo "错误:备份失败,请检查权限或磁盘空间!"
    exit 1
fi

测试与优化

测试脚本

保存后运行:

./backup.sh

如果/var/www/data有文件(比如test.txt),你会在/backup下看到类似backup-20250330-143022.tar.gz的文件。用tar -xzf解压验证:

tar -xzf /backup/backup-20250330-143022.tar.gz -C /tmp

检查/tmp下是否还原了文件。

优化建议

  1. 支持参数输入

修改脚本接受命令行参数:

SOURCE_DIR=${1:-"/var/www/data"}
BACKUP_DIR=${2:-"/backup"}

运行时可指定路径:./backup.sh /data /backup

  1. 日志记录

添加日志:

LOG_FILE="/var/log/backup.log"
echo "$(date): 备份完成,文件:$BACKUP_DIR/$BACKUP_FILE" >> "$LOG_FILE"
  1. 清理旧备份

删除7天前的备份:

find "$BACKUP_DIR" -name "backup-*.tar.gz" -mtime +7 -exec rm -f {} \;
  • -mtime +7:修改时间超过7天的文件。
  • -exec rm -f {} \;:删除匹配的文件。

进阶命令

  • find:查找文件非常强大。例如,备份特定类型文件:
tar -czf "$BACKUP_FILE" $(find "$SOURCE_DIR" -name "*.txt")
  • rsync:如果需要增量备份,可以替换cp
rsync -av "$SOURCE_DIR/" "$BACKUP_DIR/temp" && tar -czf "$BACKUP_FILE" -C "$BACKUP_DIR/temp" .
  • gzip vs bzip2 vs xztar -czf用gzip,-j用bzip2,-J用xz,压缩率依次递增,但速度递减。

运维中的实际应用

这个脚本虽小,却能融入更大的运维体系。比如:

  • cron定时运行:crontab -e添加0 2 * * * /path/to/backup.sh,每天凌晨2点备份。
  • 结合云存储:备份后用scpaws s3 cp上传到远程服务器。

相关推荐

用Acronis True Imag安卡诺斯2016进行系统备份恢复

从WindowsXp一路走过来到现在使用的Win11,相信很多朋友和我一样,经历过N次病毒、系统崩溃、数据误删除等等惨痛教训,简直是历历在目,造成我有着很高的数据备份意识,养成了良好的数据备份习惯。...

云祺容灾备份系统V5.0新产品之文件备份

对于某些企业用户来说,他们更关注数据安全的基础备份需求,比如文件、文档或者历史记录等一些非结构性文件。这些重要文件的丢失,更会对企业的正常运作带来影响,给企业造成损失,为了保障生产业务的正常运行,一些...

Linux新手入门系列:Linux下mysql定时备份及恢复

本文是linux下mysql的导出、导入,及定时备份脚本的编写,及定时器的简单应用。本系列文章是把作者刚接触和学习Linux时候的实操记录分享出来,内容主要包括Linux入门的一些理论概念知识、Web...

怎么使用再生龙打包(备份)liunx系统

liunx系统区别于Windows,由于分区格式的特殊性并不能像GHOST那样进行备份封包,有款开源的针对liunx系统备份还原的软件-再生龙(clonezilla),可能有部分人已经用过,本篇文章让...

制作 Kali Linux 随身 U 盘并实现持久化

KaliLinux的前身是BackTrackLinux发行版。KaliLinux是一个基于Debian的Linux发行版,包括很多安全和取证方面的相关工具。它由Offensiv...

Time Machine 使用教程(三):为你的备份加把锁

在我们之前的两篇TimeMachine使用教程中,你应该已经学会如何简单进行TimeMachine备份和如何将外置的TimeMachine磁盘进行「一芯二用」。那么在接下来本篇的T...

linux多磁盘挂载至同一目录

由于业务需要,需要把多块磁盘挂载至同一目录下,通常情况下一个目录只能挂载一块磁盘,否则会覆盖之前的挂载。要想实现多磁盘挂载同一目录,则需要通过卷组的方式进行解决。工具安装yuminstalllvm...

Acronis Backup (Advanced)使用示例:备份与恢复(一)

列出磁盘列出本地计算机的所有磁盘。acrocmdlistdisks列出远程计算机的磁盘。acrocmdlistdisks--host=192.168.1.2--credential...

Linux基础运维篇:Linux文件操作超详细版(第007课)

一、Linux文件系统基础1.文件类型Linux一切皆文件,常见文件类型:普通文件(-):文本文件(.txt)、二进制文件(可执行程序)、压缩文件等。目录文件(d):用于组织文件和子目录(类似...

Linux的300+个真实运维场景——14 备份与恢复

场景154:备份不完整故障排除步骤:查看用于备份的脚本或命令是否有错误。cat/path/to/backup_script.sh检查备份日志文件是否有警告或错误。cat/var/log/ba...

使用再生龙工具备份还原linux 服务器

大家好,之前给大家介绍一个一款可以用来备份还原、远程克隆、P2V、V2V的工具--再生龙,今天就来给大家演示如何用该工具备份和还原一台linux服务器。软件版本:RHEL6.8*64+clonez...

Linux TB级小文件同步备份解决方案

在某些电子档案存储的业务系统下,按照业务场景要求,需要将产生的所有电子影像资料永久存储,并支持备份;因为“钞能力”等原因,一般备份存储只有一个节点(即:一个备份存储服务器);这样就要求研发工程师,不...

不用担心硬盘烧了,让你的电脑每天定时自动为你备份重要的文件

这是前几天一位网友提到的一个问题,他问我怎么让电脑每天定时自动备份重要的文件。我整理了操作流程,这里跟大家分享一下。先说说这个技巧有什么用途,打个比方,假如你每天都在编辑一些文档,你把它们保存在D...

每天自动备份Oracle数据库

本文以CentOS7.6系统与Oracle11g为例,教你如何在Linux下设置每天自动备份Oracle数据库。一.先找到数据库的环境变量如果是在root账户下,须先登录到数据库所在账户suor...

易备数据备份软件:Hyper-V/ESXi/ESXi Free 虚拟机的理想备份方案

易备数据备份软件提供完整的虚拟机备份解决方案,支持对Hyper-V/ESXi/vSphereHypervisor(ESXiFree)虚拟机实现(热)备份功能,可以用全自动的方式,将...

取消回复欢迎 发表评论: