web-dev-qa-db-ja.com

保存方法：1週間の毎日のバックアップ、1か月の毎週、1年間の毎月、およびその後は毎年

このサーバーのデータと構成ファイルを毎日バックアップする必要があります。維持する必要があります：

  • 1週間の毎日のバックアップ
  • 1か月間の毎週のバックアップ
  • 年間の毎月のバックアップ
  • その後の年次バックアップ

これらはすべて、cronから毎日実行されるシェルスクリプトを介して実行されます。

これは、10年間実行した後のバックアップファイルの外観です。

blog-20050103.tar.bz2
blog-20060102.tar.bz2
blog-20070101.tar.bz2
blog-20080107.tar.bz2
blog-20090105.tar.bz2
blog-20100104.tar.bz2
blog-20110103.tar.bz2
blog-20120102.tar.bz2
blog-20130107.tar.bz2
blog-20130902.tar.bz2
blog-20131007.tar.bz2
blog-20131104.tar.bz2
blog-20131202.tar.bz2
blog-20140106.tar.bz2
blog-20140203.tar.bz2
blog-20140303.tar.bz2
blog-20140407.tar.bz2
blog-20140505.tar.bz2
blog-20140602.tar.bz2
blog-20140707.tar.bz2
blog-20140728.tar.bz2
blog-20140804.tar.bz2
blog-20140811.tar.bz2
blog-20140816.tar.bz2
blog-20140817.tar.bz2
blog-20140818.tar.bz2
blog-20140819.tar.bz2
blog-20140820.tar.bz2
blog-20140821.tar.bz2
blog-20140822.tar.bz2
linuxbackupbash
16
Florin Andrei

あなたはこれを真剣にやりすぎています。ひどく。

ここにいくつかの疑似コードがあります：

  • 毎日：
    • バックアップを作成し、dailyディレクトリに配置します
    • 最後の7つのdailyバックアップ以外をすべて削除します
  • 毎週：
    • バックアップを作成し、weeklyディレクトリに配置します
    • 最後の5つのweeklyバックアップ以外をすべて削除します
  • 毎月：
    • バックアップを作成し、monthlyディレクトリに配置します
    • 最後の12個のmonthlyバックアップを除くすべてを削除する
  • 毎年：
    • バックアップを作成し、yearlyディレクトリに配置します

実装しなければならないロジックの量はほぼ同じです。接吻。

これは簡単に見えます：

s3cmd ls s3://backup-bucket/daily/ | \
    awk '$1 < "'$(date +%F -d '1 week ago')'" {print $4;}' | \
    xargs --no-run-if-empty s3cmd del

または、年齢ではなくファイル数で：

s3cmd ls s3://backup-bucket/daily/ | \
    awk '$1 != "DIR"' | \
    sort -r | \
    awk 'NR > 7 {print $4;}' | \
    xargs --no-run-if-empty s3cmd del
30
MikeyB

たとえば、毎日8つのバックアップと毎週5日（毎日）のバックアップを保持するだけの場合、次のように機能します。

for i in {0..7}; do ((keep[$(date +%Y%m%d -d "-$i day")]++)); done
for i in {0..4}; do ((keep[$(date +%Y%m%d -d "sunday-$((i+1)) week")]++)); done
echo ${!keep[@]}

本日（2014-11-10）現在、これは次のように出力されます：

20141012 20141019 20141026 20141102 20141103 20141104
20141105 20141106 20141107 20141108 20141109 20141110

残りの練習として、keep- arrayに名前が表示されていないすべてのバックアップファイルを削除する必要があります。

13の月次バックアップ（毎月の最初の日曜日）と6つの年次バックアップ（毎年の最初の日曜日）も保持する場合、状況は少し複雑になります。

for i in {0..7}; do ((keep[$(date +%Y%m%d -d "-$i day")]++)); done
for i in {0..4}; do ((keep[$(date +%Y%m%d -d "sunday-$((i+1)) week")]++)); done
for i in {0..12}; do
        DW=$(($(date +%-W)-$(date -d $(date -d "$(date +%Y-%m-15) -$i month" +%Y-%m-01) +%-W)))
        for (( AY=$(date -d "$(date +%Y-%m-15) -$i month" +%Y); AY < $(date +%Y); AY++ )); do
                ((DW+=$(date -d $AY-12-31 +%W)))
        done
        ((keep[$(date +%Y%m%d -d "sunday-$DW weeks")]++))
done
for i in {0..5}; do
        DW=$(date +%-W)
        for (( AY=$(($(date +%Y)-i)); AY < $(date +%Y); AY++ )); do
                ((DW+=$(date -d $AY-12-31 +%W)))
        done
        ((keep[$(date +%Y%m%d -d "sunday-$DW weeks")]++))
done
echo ${!keep[@]}

本日（2014-11-10）現在、これは次のように出力されます：

20090104 20100103 20110102 20120101 20130106 20131103
20131201 20140105 20140202 20140302 20140406 20140504
20140601 20140706 20140803 20140907 20141005 20141012
20141019 20141026 20141102 20141103 20141104 20141105
20141106 20141107 20141108 20141109 20141110

上記と同じように、このアレイにないすべてのバックアップファイルを削除します。

6
powpow

コメントで述べたように、通常、バックアップの管理タスクをバックアップ管理ソフトウェアに委任するのが最善です。

しかし、ここにあなたの要件に従って古いバックアップを削除するためのbashのロジックがあります

#!/bin/sh

delete() {
    echo "Deleting $1"
}

DOW=$(date +%u)

if [ $DOW -eq 1 ]; then
    DATE_DAY=$(date -d "-28 days" +"%d")
    if [ $DATE_DAY -gt 7 ]; then
        DATE=$(date -d "-28 days" +"%Y-%m-%d")
        delete $DATE
    fi

    DATE_DAY=$(date -d "-364 days" +"%d")
    DATE_MONTH=$(date -d "-364 days" +"%m")
    if [ $DATE_DAY -le 7 ] && [ $DATE_MONTH -gt 1 ]; then
        DATE=$(date -d "-364 days" +"%Y-%m-%d")
        delete $DATE
    fi
else
    DATE=$(date -d "-7 days" +"%Y-%m-%d")
    delete $DATE
fi

3520日間実行した後に残るファイルを示すPHPコード

https://ideone.com/n2ymQy

Array
(
    [0] => 2005-01-03
    [1] => 2006-01-02
    [2] => 2007-01-01
    [3] => 2008-01-07
    [4] => 2009-01-05
    [5] => 2010-01-04
    [6] => 2011-01-03
    [7] => 2012-01-02
    [8] => 2013-01-07
    [9] => 2013-09-02
    [10] => 2013-10-07
    [11] => 2013-11-04
    [12] => 2013-12-02
    [13] => 2014-01-06
    [14] => 2014-02-03
    [15] => 2014-03-03
    [16] => 2014-04-07
    [17] => 2014-05-05
    [18] => 2014-06-02
    [19] => 2014-07-07
    [20] => 2014-07-28
    [21] => 2014-08-04
    [22] => 2014-08-11
    [23] => 2014-08-16
    [24] => 2014-08-17
    [25] => 2014-08-18
    [26] => 2014-08-19
    [27] => 2014-08-20
    [28] => 2014-08-21
    [29] => 2014-08-22
)
0
Joyce Babu