生信技能12 - Shell脚本备份单个目录或批量备份目录至指定目录(或NAS服务器)

单个目录或按文件夹创建时间备份目录至指定目录

在实际生产过程中,生产服务器会产生大量的原始数据和分析数据文件,一般会按分析的类别进行有规律的命名,通常以文件夹的形式存在,因此如何快速备份单个目录或多个目录对提高工作效率非常重要。

以下代码为按时间2021/2022年文件夹进行批量备份,大家可自行修改。

编写shell脚本

创建backup.sh脚本

vi /public/tools/backup.sh
chmod 700 backup.sh  # 赋予管理员权限

通过vi打开脚本

# !/bin/bash
# 通过shift和while循环处理参数

# 处理参数,规范化参数
ARGS=`getopt -a 
家庭自建服务器实践:NAS、迷你主机与自动化脚本的高效分工 自建家庭服务器是许多技术爱好者构建私有云与自动化基础设施的起点。其核心原理在于对设备进行明确分工:数据密集型任务交给NAS,利用快照与冷备实现数据安全;计算密集型任务分配给低功耗迷你主机或旧笔记本,通过Docker容器化服务保持轻量运行;而定时任务与脚本则负责备份、健康检查等自动化运维。这种架构的技术价值在于降低单点故障风险,同时通过最小化维护成本获得稳定可靠的7x24小时服务。从解决家庭文件存储、媒体播放、内网穿透到远程监控,合理规划设备分工与备份策略能极大提升效率。本文以真实经验梳理了从旧笔记本起步到组 阅读详情

相关推荐

利用shell脚本,实现腾讯云DNSPod进行DDNS动态域名解析ipv6地址

快捷导航开始如何购买域名?如何设置API(密钥)重点如何使用DDNS动态域名服务为什么使用DDNS利用脚本更新DNS常见问题我无法利用脚本获取到IPV6地址我无法执行这个脚本 开始 本代码已在Linux环境测试,理论上可以在各种Linux设备进行DDNS动态域名服务,如群晖等NAS或Linux虚拟机。 在开始之前,首先你需要在腾讯云上购买域名或域名解析服务在腾讯云上。 如何购买域名? 在腾讯云域名注册网页上,可以购买域名。 在购买完成后,可以进入腾讯云的域名控制台,查看域名信息。 如何设置API(密钥)

FlySky的发问时间 1万+

Linux下实现MySQL数据库每天自动备份定时备份

数据库备份方法与定时任务设置 摘要:本文介绍了数据库备份的重要性和基本方法,重点讲解了在Linux环境下使用crontab设置定时备份任务的步骤。内容包括备份概念、存储介质选择、创建备份脚本、添加可执行权限以及配置计划任务。通过mysqldump命令结合gzip压缩实现数据库备份,并详细说明了如何设置每分钟执行的定时任务,同时提供了任务执行失败的排查方法。文章强调备份是容灾的基础,对保障数据安全至关重要。

qq_41384233的博客 982

个人数据备份恢复实战:从脚本自动化到环境复现的完整方案

数据备份与恢复是保障数字资产安全的核心技术,其原理在于通过自动化手段对系统配置、应用环境和关键文件进行周期性归档。在云服务普及的今天,标准化的同步方案往往无法满足开发者和技术从业者对开发环境复现、配置版本管理和敏感数据可控性的深度需求。通过Shell脚本、清单化管理和版本控制工具的结合,可以实现高度定制化的备份恢复流水线,有效解决环境配置丢失、跨平台兼容等工程实践痛点。这种方案特别适用于需要快速重建开发环境、保障工作流连续性的场景,例如本文介绍的“jdq1”项目就通过自动化脚本和加密存储,实现了个人开发环境

weixin_33911824的博客 417

小米智能摄像机视频自动备份:基于SMB与Rclone的NAS/网盘同步方案

文件同步是数据备份与管理的核心技术,其核心原理在于通过监控源文件变化,并利用增量传输算法,将新增或修改的文件复制到目标存储位置。这项技术对于保障数据安全、实现异地容灾具有重要价值,广泛应用于个人数据备份、企业文档同步及物联网设备数据归档等场景。本文聚焦于智能家居中的具体实践,针对小米智能摄像机产生的海量监控视频,提供了一套自动化同步解决方案。通过利用摄像机自带的SMB协议将视频写入局域网内的NAS或服务器,再结合开源命令行工具Rclone的强大同步能力,实现了视频文件向百度网盘、阿里云盘等云端存储或另一台N

weixin_33694620的博客 564

Ubuntu服务器文件备份神器:bypy+crontab实现百度网盘自动同步(附完整脚本)

本文详细介绍了一种利用bypy命令行工具与crontab定时任务,在Ubuntu服务器上实现文件自动备份并同步至百度网盘的零成本解决方案。文章提供了完整的脚本示例,涵盖本地打包、错误处理、日志记录及自动化部署,帮助用户构建可靠、自动化的数据备份体系。

weixin_29266749的博客 282

阿里云域名迁移DNSPod实现群晖NAS动态DDNS外网访问

DNS解析是互联网访问的基础,它将域名映射到IP地址。然而,家庭宽带的公网IP通常是动态变化的,导致固定域名无法持续指向正确的地址。DDNS(动态域名解析)技术应运而生,它通过客户端自动检测IP变化并调用DNS服务商API更新记录,确保域名始终解析到最新IP。对于使用群晖NAS的用户而言,DDNS更是实现远程访问的关键环节。尽管域名注册在阿里云,但解析服务可以灵活迁移至更开放的DNSPod。借助DNSPod提供的API,结合群晖的任务计划与Shell脚本,即可构建一套稳定、可自控的动态更新机制。本文从DNS

weixin_29313817的博客 269

Docker Compose实现Bitwarden自动备份与邮件通知完整方案

数据备份是保障服务连续性与数据安全性的核心运维实践,其原理在于通过定期复制关键数据,形成冗余副本以应对硬件故障、人为误操作等风险。在容器化部署场景下,结合Docker Compose的编排能力,可以构建一套原子化、可编排的自动化备份流程,其技术价值在于实现了备份任务的声明式管理与环境隔离。对于自建密码管理器Bitwarden这类存储敏感信息的应用,自动化备份与即时通知更是不可或缺的防护措施。本文以Bitwarden(vaultwarden)为例,详细解析如何利用Docker Compose、Shell脚本与

xpp02的专栏 385

Zyxel NAS高危漏洞CVE-2024-29973:命令注入原理、复现与防御

命令注入是Web安全中一种常见的高危漏洞,其原理在于应用程序未对用户输入进行充分过滤和验证,便将其拼接到系统命令中执行。攻击者通过构造恶意输入,可突破预期逻辑,在服务器上执行任意命令,从而获取系统控制权。这种漏洞的技术价值在于其利用门槛相对较低,但危害极大,常被用于数据窃取、内网渗透和持久化控制。在物联网设备和网络附加存储(NAS)等场景中,命令注入漏洞尤为危险,因为这类设备往往直接暴露于网络,且权限较高。本文以Zyxel NAS设备中曝出的CVE-2024-29973高危漏洞为例,深入剖析其命令注入的成因

weixin_30765577的博客 637

别再重装系统了!树莓派Linux命令行备份脚本一键生成指南

本文为树莓派用户提供了一套基于Linux命令行的自动化系统备份解决方案。通过编写脚本动态计算备份大小、集成pishrink工具压缩镜像,并设置cron定时任务,实现一键式、可定制的SD卡系统备份,有效避免数据丢失和繁琐的重装过程,提升系统管理效率与安全性。

weixin_29202213的博客 385

TDEngine - 从taosdump实战到自动化备份策略设计

本文详细解析了TDEngine的taosdump工具在数据备份与恢复中的实战应用,包括安装避坑指南、参数配置技巧及自动化备份策略设计。通过实际案例和脚本示例,帮助用户高效实现跨版本迁移和数据归档,提升数据库管理效率。

weixin_27134495的博客 340

利用IPv6与DDNS实现飞牛NAS高速远程访问全攻略

动态域名解析(DDNS)是一种将动态IP地址映射到固定域名的网络服务技术,其核心原理是通过客户端程序定期检测设备IP变化,并自动更新DNS记录。这项技术解决了因IP地址动态变化导致的服务访问中断问题,在家庭网络、物联网和远程办公场景中具有重要价值。通过结合IPv6协议的海量地址资源,DDNS能够为NAS等家庭服务器提供稳定、高效的远程访问能力,无需依赖第三方中转服务。本文以飞牛NAS为例,详细讲解如何利用公网IPv6和阿里云DDNS API搭建自主可控的远程访问方案,涵盖环境检查、脚本部署、防火墙配置等关键

weixin_29290947的博客 365

服务器备份实战指南:从RPO/RTO策略到BorgBackup工具全解析

数据备份是保障信息系统可用性与业务连续性的核心基础技术,其本质在于通过冗余存储机制,确保在发生硬件故障、人为误操作或安全攻击时,能够将数据恢复到可用状态。从技术原理层面,备份通常涉及全量、增量与差分三种基本类型,通过不同的数据同步策略,在恢复点目标(RPO)与恢复时间目标(RTO)之间寻求最佳平衡。在工程实践中,有效的备份方案必须结合自动化工具与监控体系,例如利用BorgBackup等工具实现加密、去重和版本管理,并遵循3-2-1黄金法则进行多介质、异地存储。这些技术广泛应用于Web服务器、数据库(如Pos

weixin_30522183的博客 434

群晖NAS搭建Jellyfin影音库:基于tinyMediaManager的本地NFO元数据自动化管理

媒体服务器元数据管理是构建个人影音库的核心环节,它决定了影视信息的呈现质量与检索效率。其原理是通过刮削器从在线数据库匹配影片信息,并生成包含海报、简介、演职员等数据的标准化文件。这项技术的核心价值在于将杂乱的文件系统转化为直观可视的海报墙,极大提升了媒体库的管理与浏览体验。在家庭影院、资料归档等场景中,精准的元数据是实现高效检索与沉浸式观看的基础。本文聚焦于利用tinyMediaManager这一专业刮削工具,结合Jellyfin媒体服务器,在群晖NAS上实现一套以本地NFO文件为核心的自动化元数据解决方案

weixin_34377919的博客 401

centos7下shell脚本部署ansible

 ansible是新出现的自动化运维工具,基于Python开发,集合了众多运维工具(puppet、chef、func、fabric)的优点,实现了批量系统配置、批量程序部署、批量运行命令等功能。 本文采用shell脚本的方式来部署非常方便

Lil Nas X的博客 4758

Linux命令编程: 使用Shell脚本实现文件备份

Shell脚本是在Linux系统中常用的一种编程方式,它可以帮助我们自动化执行一系列的命令和任务。在本文中,我们将使用Shell脚本来实现文件备份的功能。具体而言,我们将编写一个脚本,用于将指定的文件或目录备份到指定的目标位置。通过编写一个简单的脚本,我们可以自动化执行文件备份操作,提高工作效率。首先,我们需要创建一个新的Shell脚本文件,可以使用任何文本编辑器,比如vi或nano。否则,打印出备份失败的信息。你可以根据实际需求,修改脚本中的源文件或目录路径和备份文件存储目录路径,以及备份文件名的格式。

ByteGlide的博客 1022

Linux系统shell脚本之文件备份

Linux系统shell脚本之文件备份

jks212454的博客 2293

Delphi开发者必备:CEF4Delphi跨平台浏览器嵌入实战指南(含Lazarus适配)

本文详细介绍了Delphi开发者如何利用CEF4Delphi实现跨平台浏览器嵌入,包括环境配置、Lazarus适配、ARM架构优化及Firemonkey集成等实战技巧。通过Chromium引擎的强大功能,开发者可以轻松为传统桌面应用添加现代浏览器特性,提升多平台开发效率。

weixin_29233333的博客 230

解决Keil uVision许可证管理中Unknown Product错误

嵌入式开发中,IDE工具的许可证管理是确保开发环境正常运行的关键环节。Keil uVision作为ARM架构的主流开发工具,其许可证系统采用加密验证机制,通过产品版本识别实现授权控制。当出现Unknown Product错误时,通常源于版本兼容性问题或区域发行版差异,这直接影响开发工具链的可用性。特别是在维护历史项目或使用中国特供版时,开发者常会遇到此类问题。通过分析许可证类型、调整安装配置或建立虚拟化开发环境等工程实践方案,可以有效解决这类授权验证故障,保障嵌入式项目的持续集成与交付效率。

weixin_33743248的博客 365

省三医院新门诊大楼网络安全建设项目实施方案

为了响应国家建设数字医疗,构建医联网、医共体的号召,新门诊大楼现有计算机网络,实现各门诊室、药房、医学影像科室及后勤科室的终端数据互通。在互联网出口以三层模式部署两台防火墙,作为连接公网的出口设备;出于等保合规和自身业务安全的考虑,现需要该网络上通过网络安全设备实现安全建设。公网出口防火墙,配置攻击防御策略,防御互联网上的病毒进入内网。公网出口防火墙配置攻击防御策略,防御外网对内网的入侵行为。服务器取得边界防火墙,配置攻击防御策略,入侵防御策略。公网出口防火墙配置入侵防御策略,防御外网对内网发起的D。

m0_63645854的博客 2016

从零构建:ESP32S3无线DAP-Link调试器的硬件与软件协同设计

本文详细介绍了基于ESP32S3的无线DAP-Link调试器的硬件与软件协同设计,涵盖关键元器件选型、无线通信协议优化、双核任务处理及低功耗调试方案。通过ESP-NOW协议实现低延迟无线调试,结合USB协议栈与双核协同,为嵌入式开发提供高效灵活的调试解决方案。

gitlab7runner的博客 860

从原理到实践:MIPI D-PHY v1.2的HS-Deskew功能全解析(附时序图详解)

本文深入解析MIPI D-PHY v1.2的HS-Deskew功能,从技术背景到实现机制,详细介绍了其在2.5Gbps高速传输中的关键作用。通过时序图详解和实测数据,帮助工程师理解并应用这一技术,解决信号完整性问题,提升系统可靠性。

weixin_30300225的博客 309

合泰单片机HT32之keil5开发环境搭建(一)

1. 前言 这两天在准备合泰杯,但是总是感觉无从下手,因为合泰单片机的资料教程什么的非常少,不像stm32那样。而且听说要用合泰单片机的专用IDE,感觉当场被劝退了。后来经过查找资料,发现合泰单片机也有keil5的支持包,也就是说可以从库函数进行开发,不用从寄存器进行开发,但我找了好久,并没有找到教程,后来实在没办法,打算自己动手搭建环境,经过了大概两天的挣扎后,终于成功地搭建好了环境,也成功地点...

weixin_44713763的博客 8672

基于LSTM GRU RNN的交通流量预测-完整数据代码

基于LSTM GRU RNN的交通流量预测-完整数据代码

923

ENVI无法打开Landsat8的头文件问题和解决

再次将txt文件拖入ENVI中,就会得到7个波段组合后的真彩色图像,而且辐射定标所需的参数信息都已经定义好了。按住CTRL+F,查找GROUP = LEVEL1_PROCESSING_RECORD。第一行GROUP = LANDSAT_METADATA_FILE。会查到两个包含的句子,把这两个中间的部分全部删掉。双击打开该xxx_MTL.txt的头文件。删除空行后,应该为如下图的样子。把LANDSAT改为L1。

所有专家都曾始于新手 9703

Probability and Statistics - 4th edition

Probability and Statistics - 4th edition

怀旧版电脑GBC模拟器

再现原版GBC掌机的界面,电脑运行连游戏界面都一样大小,很怀旧,很真实,(英文版)强烈推荐,很小的文件,很难才找到的。

计算机控制技术及应用

《计算机控制技术及应用》通过总结作者的科研成果和吸收国内外的先进理论、方法和技术,以计算机控制系统的网络化、开放化、智能化和集成化发展趋势为主线索,主要介绍计算机控制系统的基本概念和计算机控制系统的典型形式,计算机控制系统的数学描述与基本分析方法,以及数字PID控制器、最少拍控制系统、达林算法、状态变量设计法等设计方法及其各种改进算法。重点突出计算机控制系统输入输出通道接口的设计方法和典型控制系统的设计案例与实现方法等。

NTscan扫描工具

ntscan是一个扫描器,可以扫描没有密码和弱密码的共享,先到配置文件中填写猜测的用户名和密码,扫描过程中右侧出现的是扫描日志。

上一篇: 生信技能11 - shell脚本批量逐条执行命令,并显示进度条和执行状态
下一篇: 生信技能13 - 根据基因列表文件查找基因信息,并单独输出为txt文件
生信与基因组学
博客等级 码龄9年 7209粉丝 257原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

生信与基因组学

每一份鼓励是我坚持下去动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值