各データベースのバックアップファイルを作成します。ファイル名は次のとおりです。
prod20210528_1200.sql.gz
pattern: prod`date +\%Y%m%d_%H%M`
必要に応じてパターンを調整できます。
私はスクリプトが欲しい:
- 過去 3 日 (3 日) までのすべてのバックアップをアーカイブします。
- x(例:3)日より古いバックアップの場合は、00:00から始まるバックアップのみを保存する必要があります。
- y(例:14)日より古いバックアップの場合は、毎週(月曜日)1つのファイルのみをアーカイブします。
- z日(例:90)より古いバックアップの場合は、月に1つのファイルのみを保持します(毎月1日)。
- 可能であれば、スクリプトはファイルの日付(生成)情報ではなくファイル名を使用する必要があります。
- このスクリプトは毎日実行する必要があります。
残念ながら、私はシェル/バッシュスクリプト言語について知ることはほとんどありません。私は次のようにします:
if (file < today - x AND date > today - (x + 1))
{
if (%H_of_file != 00 AND %M_of_file != 00)
{
delete file
}
}
if (file < today - y AND date > today - (y + 1))
{
if (file != Monday)
{
delete file
}
}
if (file < today - z AND date > today - (z + 1))
{
if (%m_of_file != 01)
{
delete file
}
}
Does this makes any sense for you?
Thank you very much!
All the best,
Phantom
答え1
コミッタとしてpyExpireBackups私のソリューションのExpirationRuleの実装を知ることができます(ソースは以下とgithubリポジトリにあります)。
バラよりhttps://wiki.bitplan.com/index.php/PyExpireBackups徳のために。
インストールスクリプト:
pip install PyExpireBackups
シェルコマンド「expireBackups」がインストールされます。使用法は次のとおりです。
expireBackups -h
usage: expireBackups [-h] [-d] [--days DAYS] [--weeks WEEKS] [--months MONTHS] [--years YEARS]
[--minFileSize MINFILESIZE] [--rootPath ROOTPATH] [--baseName BASENAME] [--ext EXT]
[--createTestFiles CREATETESTFILES] [-f] [-V]
Backup expiration based on rules (yearly,monthly,weekly,daily ...)
Created by Wolfgang Fahl on 2022-04-01.
Copyright 2008-2022 Wolfgang Fahl. All rights reserved.
Licensed under the Apache License 2.0
http://www.apache.org/licenses/LICENSE-2.0
Distributed on an "AS IS" basis without warranties
or conditions of any kind, either express or implied.
USAGE
optional arguments:
-h, --help show this help message and exit
-d, --debug show debug info
--days DAYS number of consecutive days to keep a daily backup (default: 7)
--weeks WEEKS number of consecutive weeks to keep a weekly backup (default: 6)
--months MONTHS number of consecutive month to keep a monthly backup (default: 8)
--years YEARS number of consecutive years to keep a yearly backup (default: 4)
--minFileSize MINFILESIZE
minimum File size in bytes to filter for (default: 1)
--rootPath ROOTPATH
--baseName BASENAME the basename to filter for (default: None)
--ext EXT the extension to filter for (default: None)
--createTestFiles CREATETESTFILES
create the given number of temporary test files (default: None)
-f, --force
-V, --version show program's version number and exit
例を実行すると、次の結果が表示されます。
expireBackups --ext .tgz
keeping 7 files for dayly backup
keeping 6 files for weekly backup
keeping 8 files for monthly backup
keeping 4 files for yearly backup
expiring 269 files dry run
# 1✅: 0.0 days( 5 GB/ 5 GB)→./sql_backup.2022-04-02.tgz
# 2✅: 3.0 days( 5 GB/ 9 GB)→./sql_backup.2022-03-30.tgz
# 3✅: 4.0 days( 5 GB/ 14 GB)→./sql_backup.2022-03-29.tgz
# 4✅: 5.0 days( 5 GB/ 18 GB)→./sql_backup.2022-03-28.tgz
# 5✅: 7.0 days( 5 GB/ 23 GB)→./sql_backup.2022-03-26.tgz
# 6✅: 9.0 days( 5 GB/ 27 GB)→./sql_backup.2022-03-24.tgz
# 7✅: 11.0 days( 5 GB/ 32 GB)→./sql_backup.2022-03-22.tgz
# 8❌: 15.0 days( 5 GB/ 37 GB)→./sql_backup.2022-03-18.tgz
# 9❌: 17.0 days( 5 GB/ 41 GB)→./sql_backup.2022-03-16.tgz
# 10✅: 18.0 days( 5 GB/ 46 GB)→./sql_backup.2022-03-15.tgz
# 11❌: 19.0 days( 5 GB/ 50 GB)→./sql_backup.2022-03-14.tgz
# 12❌: 20.0 days( 5 GB/ 55 GB)→./sql_backup.2022-03-13.tgz
# 13❌: 22.0 days( 5 GB/ 59 GB)→./sql_backup.2022-03-11.tgz
# 14❌: 23.0 days( 5 GB/ 64 GB)→./sql_backup.2022-03-10.tgz
# 15✅: 35.0 days( 4 GB/ 68 GB)→./sql_backup.2022-02-26.tgz
# 16❌: 37.0 days( 4 GB/ 73 GB)→./sql_backup.2022-02-24.tgz
# 17❌: 39.0 days( 4 GB/ 77 GB)→./sql_backup.2022-02-22.tgz
# 18❌: 40.0 days( 5 GB/ 82 GB)→./sql_backup.2022-02-21.tgz
# 19✅: 43.0 days( 4 GB/ 86 GB)→./sql_backup.2022-02-18.tgz
...
...
# 264✅:1426.0 days( 4 GB/ 1 TB)→./sql_backup.2018-05-07.tgz
# 265❌:1433.0 days( 4 GB/ 1 TB)→./sql_backup.2018-04-30.tgz
# 266❌:1447.0 days( 4 GB/ 1 TB)→./sql_backup.2018-04-16.tgz
# 267❌:1482.0 days( 4 GB/ 1 TB)→./sql_backup.2018-03-12.tgz
# 268❌:1489.0 days( 4 GB/ 1 TB)→./sql_backup.2018-03-05.tgz
# 269❌:1509.0 days( 4 GB/ 1 TB)→./sql_backup.2018-02-12.tgz
kept 24 files 105 GB
答え2
これは私にとって効果的です(GNU日付ではなくBSD日付)
#!/usr/local/bin/bash
DIR_BACKUPS='/backups'
KEEP_DAILY=3
KEEP_WEEKLY=14
KEEP_MONTHLY=90
date_keep_daily=$(date -j -v-${KEEP_DAILY}d +"%Y%m%d")
date_keep_weekly=$(date -j -v-${KEEP_WEEKLY}d +"%Y%m%d")
date_keep_monthly=$(date -j -v-${KEEP_MONTHLY}d +"%Y%m%d")
for file in $DIR_BACKUPS/prod*.sql.gz; do
timestamp=${file#*onwalt}
timestamp=${timestamp%%.*}
date_of_file=${timestamp%%_*}
hour_of_file=${timestamp:(-4):2}
if [[ $date_of_file < $date_keep_monthly ]]; then
if [[ $(date -jf "%Y%m%d_%H%M" $timestamp +"%d") != 01 ]]; then
rm $file
fi
elif [[ $date_of_file < $date_keep_weekly ]]; then
if [[ $(date -jf "%Y%m%d_%H%M" $timestamp +"%u") != 1 ]]; then
rm $file
fi
elif [[ $date_of_file < $date_keep_daily ]]; then
if [[ $(date -jf "%Y%m%d_%H%M" $timestamp +"%H") != 00 ]]; then
rm $file
fi
fi
done