百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

编写脚本,实现对指定目录下所有文件备份,并压缩存到其他位置

nanshan 2025-05-15 20:02 19 浏览 0 评论

想象一下,你是一个运维工程师,负责管理一台生产服务器。某天凌晨,业务系统因为一次误操作删除了关键数据,老板怒气冲冲地找到你:“数据呢?备份呢?”如果你事先写好了一个备份脚本,定时运行,甚至还能压缩存储节省空间,那你就可以淡定地回复:“别慌,数据我已经备份好了。”这种底气,来自于你对工具的掌控和对细节的把控。

这个脚本的目标很简单:

  1. 指定一个源目录,扫描里面的所有文件。
  2. 将这些文件备份到目标位置。
  3. 用压缩工具打包备份,节省磁盘空间。
  4. 加上时间戳,让每次备份都有迹可循。

看似简单,但细节决定成败。我们会从基础命令讲起,一步步带你实现这个脚本。

准备工作:工具与环境

在动手之前,我们需要确保环境就绪。假设你用的是Linux系统(比如Ubuntu、CentOS),以下是我们会用到的工具和命令:

  • bash:Shell脚本的运行环境,通常Linux默认就是它。可以用echo $SHELL检查是否为/bin/bash
  • cp:用于复制文件和目录。
  • tar:经典的压缩工具,支持打包和压缩。
  • date:生成时间戳,方便追踪备份时间。
  • mkdir:创建目录。
  • ls:列出目录内容(虽然我们不常用它,但了解一下有备无患)。
  • find:查找文件的神器(稍后会用到)。

确保这些命令可用,运行which cp tar date mkdir ls find检查它们的路径。如果某个命令缺失,可以用包管理器安装(比如apt install taryum install tar)。


脚本设计:从需求到实现

我们先明确需求:

  • 输入:源目录路径(比如/var/www/data)。
  • 输出:备份文件,压缩后存到目标目录(比如/backup)。
  • 功能:备份所有文件,带时间戳,压缩为.tar.gz格式。
  • 额外要求:脚本要健壮,能处理目录不存在、权限不足等情况。

基于此,我们设计一个脚本,命名为backup.sh。以下是逐步实现的过程。


动手写脚本

1. 创建脚本文件并添加解释器

新建文件:

touch backup.sh
chmod +x backup.sh  # 赋予执行权限

用编辑器(比如vimnano)打开,写入第一行:

#!/bin/bash

这告诉系统用bash解释器运行脚本。

2. 定义变量

为了让脚本灵活,我们用变量存储路径和时间戳:

# 源目录(需要备份的目录)
SOURCE_DIR="/var/www/data"

# 目标目录(备份存储位置)
BACKUP_DIR="/backup"

# 当前时间戳,格式为年月日-时分秒,例如 20250330-143022
TIMESTAMP=$(date +"%Y%m%d-%H%M%S")

# 备份文件名
BACKUP_FILE="backup-$TIMESTAMP.tar.gz"
  • date +"%Y%m%d-%H%M%S":生成如20250330-143022的时间戳。%Y是年,%m是月,%d是日,%H是小时,%M是分钟,%S是秒。
  • 用变量的好处是后续修改路径或文件名时只需调整这里。

3. 检查目录是否存在

脚本不能假设一切顺利,我们得先检查目录:

# 检查源目录是否存在
if [ ! -d "$SOURCE_DIR" ]; then
    echo "错误:源目录 $SOURCE_DIR 不存在!"
    exit 1
fi

# 检查目标目录是否存在,不存在则创建
if [ ! -d "$BACKUP_DIR" ]; then
    echo "目标目录 $BACKUP_DIR 不存在,正在创建..."
    mkdir -p "$BACKUP_DIR"
    if [ $? -ne 0 ]; then  # 检查mkdir是否成功
        echo "错误:无法创建目标目录 $BACKUP_DIR,请检查权限!"
        exit 1
    fi
fi
  • [ ! -d "$SOURCE_DIR" ]-d测试目录是否存在,!取反,条件为真表示目录不存在。
  • exit 1:退出脚本,返回非零状态码表示失败。
  • mkdir -p:递归创建目录,即使父目录不存在也不会报错。
  • $?:上一个命令的退出状态,0表示成功,非0表示失败。

4. 执行备份与压缩

核心功能来了:备份并压缩。我们用tar命令一步到位:

echo "开始备份 $SOURCE_DIR 到 $BACKUP_DIR/$BACKUP_FILE ..."
tar -czf "$BACKUP_DIR/$BACKUP_FILE" -C "$SOURCE_DIR" .
if [ $? -eq 0 ]; then
    echo "备份成功!文件保存为:$BACKUP_DIR/$BACKUP_FILE"
else
    echo "错误:备份失败,请检查权限或磁盘空间!"
    exit 1
fi
  • tar -czf
  • -c:创建新归档文件。
  • -z:用gzip压缩。
  • -f:指定输出文件。
  • -C "$SOURCE_DIR" .:切换到源目录后打包当前目录(.)的内容,避免在压缩包中包含完整路径。
  • 检查$?确保备份成功。

5. 完整脚本

把以上部分合起来,backup.sh如下:

#!/bin/bash

# 源目录(需要备份的目录)
SOURCE_DIR="/var/www/data"

# 目标目录(备份存储位置)
BACKUP_DIR="/backup"

# 当前时间戳,格式为年月日-时分秒,例如 20250330-143022
TIMESTAMP=$(date +"%Y%m%d-%H%M%S")

# 备份文件名
BACKUP_FILE="backup-$TIMESTAMP.tar.gz"

# 检查源目录是否存在
if [ ! -d "$SOURCE_DIR" ]; then
    echo "错误:源目录 $SOURCE_DIR 不存在!"
    exit 1
fi

# 检查目标目录是否存在,不存在则创建
if [ ! -d "$BACKUP_DIR" ]; then
    echo "目标目录 $BACKUP_DIR 不存在,正在创建..."
    mkdir -p "$BACKUP_DIR"
    if [ $? -ne 0 ]; then
        echo "错误:无法创建目标目录 $BACKUP_DIR,请检查权限!"
        exit 1
    fi
fi

# 执行备份与压缩
echo "开始备份 $SOURCE_DIR 到 $BACKUP_DIR/$BACKUP_FILE ..."
tar -czf "$BACKUP_DIR/$BACKUP_FILE" -C "$SOURCE_DIR" .
if [ $? -eq 0 ]; then
    echo "备份成功!文件保存为:$BACKUP_DIR/$BACKUP_FILE"
else
    echo "错误:备份失败,请检查权限或磁盘空间!"
    exit 1
fi

测试与优化

测试脚本

保存后运行:

./backup.sh

如果/var/www/data有文件(比如test.txt),你会在/backup下看到类似backup-20250330-143022.tar.gz的文件。用tar -xzf解压验证:

tar -xzf /backup/backup-20250330-143022.tar.gz -C /tmp

检查/tmp下是否还原了文件。

优化建议

  1. 支持参数输入

修改脚本接受命令行参数:

SOURCE_DIR=${1:-"/var/www/data"}
BACKUP_DIR=${2:-"/backup"}

运行时可指定路径:./backup.sh /data /backup

  1. 日志记录

添加日志:

LOG_FILE="/var/log/backup.log"
echo "$(date): 备份完成,文件:$BACKUP_DIR/$BACKUP_FILE" >> "$LOG_FILE"
  1. 清理旧备份

删除7天前的备份:

find "$BACKUP_DIR" -name "backup-*.tar.gz" -mtime +7 -exec rm -f {} \;
  • -mtime +7:修改时间超过7天的文件。
  • -exec rm -f {} \;:删除匹配的文件。

进阶命令

  • find:查找文件非常强大。例如,备份特定类型文件:
tar -czf "$BACKUP_FILE" $(find "$SOURCE_DIR" -name "*.txt")
  • rsync:如果需要增量备份,可以替换cp
rsync -av "$SOURCE_DIR/" "$BACKUP_DIR/temp" && tar -czf "$BACKUP_FILE" -C "$BACKUP_DIR/temp" .
  • gzip vs bzip2 vs xztar -czf用gzip,-j用bzip2,-J用xz,压缩率依次递增,但速度递减。

运维中的实际应用

这个脚本虽小,却能融入更大的运维体系。比如:

  • cron定时运行:crontab -e添加0 2 * * * /path/to/backup.sh,每天凌晨2点备份。
  • 结合云存储:备份后用scpaws s3 cp上传到远程服务器。

相关推荐

基于 Linux 快速搭建企业级 DNS 服务器(Bind9 ...

一、引言在大型企业网络或自建系统中,搭建一套高可用、自控的DNS解析服务器至关重要。本文将带你基于Linux环境,从零搭建企业级DNS服务平台,采用Bind9实战配置,确保解析稳定、安...

Linux无法解析域名的解决办法(linux无法解析域名的解决办法有哪些)

如果由于误操作,删除了系统原有的dhcp相关设置就无法正常解析域名。  此时,需要手动修改配置文件:  /etc/resolv.conf  将域名解析服务器手动添加到配置文件中  该文件是DNS域名解...

在centos7 创建基于域名的虚拟主机nginx服务器

直接用ip地址访问首先是不安全,其次不太容易记住,如果你的服务器上的项目有很多个,你创建多个基于Ip的虚拟主机,很容易导致公网ip冲突或乱用的情况。这时候我们就可以选择基于域名的虚拟主机。第一步、安装...

Linux之DNS服务(linux dnsserver)

一、学习路线如下二、DNS介绍1.域名的概念域名由特定的格式组成,用来表示互联网中某一台计算机或者计算机组的名称,能够使人更方便的访问互联网,而不用记住能够被机器直接读取的IP地址。2.DNS(dom...

Linux环境下DNS服务器配置图文详细教程

测试环境为vmware虚拟机下,linux系统为RedHatEnterpriseLinuxServer6.0(Santiago),内核版本Linux2.6.32-71.el6.i686...

构建基于 Linux 的高性能 DNS 服务器

在现代网络架构中,DNS(域名解析)是访问互联网的关键环节。搭建一个高性能、低延迟、可缓存加速的私有DNS服务器,不仅可以提升访问速度,还能增强网络隐私和安全性。本文将基于Linux系统,详细...

从运维的角度带你初识neo4j图形数据库的安装及配置

前言随着公司业务架构的改变,以前我部署环境的时候,一般只是部署Mysql,jdk,tomcat即可,现在还要部署一些nosql,如redis,neo4j,在之前从来没了解过,随着学习的深入而做了一些笔...

[超全整理] Java 程序员必备的 100 条 Linux 命令大全

一、基础操作(10条)#1.ls-查看目录内容ls-l#长格式显示文件和目录ls-a#显示隐藏文件ls-lh#带单位显示文件大小#2.cd-切换目录...

软件测试|一文教你轻松搭建docker环境

前言Docker提供轻量的虚拟化,你能够从Docker获得一个额外抽象层,你能够在单台机器上运行多个Docker微容器,而每个微容器里都有一个微服务或独立应用,例如你可以将Tomcat运行在一个Do...

docker基础知识/尚硅谷docker学习笔记

最近看了好多docker的资料,找了一些尚硅谷docker的教学视频,大概总结了一下前前后后的学习笔记。分享给大家。安装Docker的基本组成镜像Docker镜像(Image)就是一个只读的模板。镜...

前端_react项目从windows部署到centos

前言:从工程角度来讲,本地开发完就要把项目部署到生产环境,此过程的快慢也直接影响着整体的效率。所以也有很多人做持续集成的工作,例如:CI/CD/一键部署。但对于个人开发者而言,如果能有工具支撑是最好的...

Springboot项目使用docker部署(docker中运行springboot项目)

环境:SpringBoot2.2.10.RELEASE+Docker+Centos7+JDK8安装配置Dockeryum包更新到最新yumupdate卸载旧版本dockeryumre...

Spring Boot 3.x + Redis 7.x,轻松掌握Redisson分布式锁实战技巧

大家好,我是袁庭新。在分布式环境中,确保数据的一致性和正确性是至关重要的。对于需要高性能、高并发和分布式数据存储的应用程序来说,Redisson是一个很好的选择。同时,Redisson提供的分布式锁功...

Docker篇(二):Docker实战,命令解析

大家好,我是杰哥上周我们通过几个问题,让大家对于Docker有了一个全局的认识。然而,说跟练往往是两个概念。从学习的角度来说,理论知识的学习,往往只是第一步,只有经过实战,才能真正掌握一门技术所以,本...

新手快速入门Docker,轻松掌握Docker安装与使用

安装使用官方安装脚本自动安装curl-fsSLhttps://get.docker.com|bash-sdocker--mirrorAliyun手动安装CentOS7(使用yum进...

取消回复欢迎 发表评论: