IT pass HikiWiki - [Memo2018][ITPASS]ローカルでのバックアップの設定 Diff

{{toc_here}}

[((<ITPASS[((<[ITPASS2018]2018年度サーバ構築・運用ドキュメントログ>)) へ戻る]

#= 目的

#ITPASS サーバでは,
#一部の領域 (itpass などグループで使用している領域) について,
普段は予備サーバへのバックアップを行っている.
#(詳しくは ((<[ITPASS2017]サーバ交換作業 1 週間後に行う作業>)) を参照のこと).

#サーバの交換時は予備サーバにバックアップすることができないので,
#代わりの冗長性を持たせるために
#システムがインストールされているディスクとは別のディスクに
#ローカルバックアップを取るようにしておく.
#このとき, 万が一本サーバのディスクが故障したときの
#復旧を容易にするために
#普段より多めのデータをバックアップしておく.

#通常運用中にはローカルバックアップは行わない.

#= 概要

#以下では, ローカルバックアップを取っておく方法について記す.

#* ika にバックアップ用のディスクを取り付ける.
#  * 通常は最初から付いている.
#  * 今回は元々付いているため, 取付作業は行わなかった.

#* 1 日 1 回, 以下のバックアップを取るように cron スクリプトを設置する.
#  * 下記以外のものを全てバックアップする
#    * /tmp/, /proc/, /dev/, /sys/ 等のシステム固有なものや一時的に用いるもの
#    * /home/aquota.user


#= 予備ディスクの準備

#以下は, 既に本体ディスクが取り付けられており, これから予備ディスクをフォーマット, マウントすることを想定した文書である. 既に予備ディスクがフォーマット, マウントされている場合には ((<#バックアップスクリプトの設置|URL:#バックアップスクリプトの設置>)) から作業を始めよ.

== 予備ディスクのパーティショニングとフォーマット

予備ディスクが本体ディスクと同じパーティション構成になっているか確認した.
parted コマンドを使ってパーティション構成を確認した.
確認したところ, パーティション構成が異なっていた.

# parted -l
Model: ATA Hitachi HDS72302 (scsi)
Disk /dev/sda: 2000GB
Sector size (logical/physical): 512B/512B
Partition Table: msdos
Disk Flags:

Number  Start   End     Size    Type      File system     Flags
  1      1049kB  60.0GB  60.0GB  primary   ext4            boot
  2      60.0GB  2000GB  1940GB  extended
  5      60.0GB  92.0GB  32.0GB  logical   linux-swap(v1)
  6      92.0GB  2000GB  1908GB  logical   ext4


Model: ATA Hitachi HDS72302 (scsi)
Disk /dev/sdb: 2000GB
Sector size (logical/physical): 512B/512B
Partition Table: gpt
Disk Flags:

Number  Start   End     Size    File system  Name         Flags
  1      1049kB  200GB   200GB   ext4         backup root
  2      200GB   2000GB  1800GB  ext4         backup home

現在のディスクの状況を確認した.

# df
ファイルシス   1K-ブロック      使用     使用可 使用% マウント位置
udev               8205628         0    8205628    0% /dev
tmpfs              1643376    181524    1461852   12% /run
/dev/sda1         57410400  51647656    2816748   95% /
tmpfs              8216864         0    8216864    0% /dev/shm
tmpfs                 5120         4       5116    1% /run/lock
tmpfs              8216864         0    8216864    0% /sys/fs/cgroup
/dev/sdb2       1729519148     77852 1641516768    1% /home.bk
/dev/sdb1        191234956     61468  181389580    1% /bk
/dev/sda6       1833369896 553791412 1186378612   32% /home

予備ディスクをアンマウントした.

# umount /dev/sdb1
# umount /dev/sdb2

parted コマンドを用いてパーティションを作成した.

# parted /dev/sdb

p (print の略) で現在の状況を確認した.

(parted) p
Model: ATA Hitachi HDS72302 (scsi)
Disk /dev/sdb: 2000GB
Sector size (logical/physical): 512B/512B
Partition Table: gpt
Disk Flags:

Number  Start   End     Size    File system  Name         Flags
  1      1049kB  200GB   200GB   ext4         backup root
  2      200GB   2000GB  1800GB  ext4         backup home

新しくパーティションを作成した. ディスク内のデータが失われるため, 警告が出るがここでは Yes とした.

  (parted) mklabel msdos
  Warning: The existing disk label on /dev/sdb will be destroyed and all data  on this disk will be lost. Do you want to continue?
  Yes/No? Yes

パーティションの詳細な設定は以下の通り:

(parted) unit GB
(parted) mkpart
Partition type?  primary/extended? primary
File system type?  [ext2]? ext4
Start? 0
End? 60
(parted) mkpart
Partition type?  primary/extended? extended
Start? 60
End? 2000
(parted) mkpart
Partition type?  primary/logical? logical
File system type?  [ext2]? linux-swap(v1)
Start? 60
End? 92
(parted) mkpart
Partition type?  primary/logical? logical
File system type?  [ext2]? ext4
Start? 92
End? 2000

現在の状況を確認した.

(parted) p
Model: ATA Hitachi HDS72302 (scsi)
Disk /dev/sdb: 2000GB
Sector size (logical/physical): 512B/512B
Partition Table: msdos
Disk Flags:

Number  Start   End     Size    Type      File system     Flags
  1      0.00GB  60.0GB  60.0GB  primary   ext4            lba
  2      60.0GB  2000GB  1940GB  extended                  lba
  5      60.0GB  92.0GB  32.0GB  logical   linux-swap(v1)  lba
  6      92.0GB  2000GB  1908GB  logical   ext4            lba

lba フラグを外した.

(parted) set 1 lba off
(parted) set 2 lba off
(parted) set 5 lba off
(parted) set 6 lba off

フラグが外れていることを確認した.

(parted) p
Model: ATA Hitachi HDS72302 (scsi)
Disk /dev/sdb: 2000GB
Sector size (logical/physical): 512B/512B
Partition Table: msdos
Disk Flags:

Number  Start   End     Size    Type      File system     Flags
  1      0.00GB  60.0GB  60.0GB  primary   ext4
  2      60.0GB  2000GB  1940GB  extended
  5      60.0GB  92.0GB  32.0GB  logical   linux-swap(v1)
  6      92.0GB  2000GB  1908GB  logical   ext4

parted から出た.

(parted) quit
Information: You may need to update /etc/fstab.

上で作成したパーティション (1) にファイルシステムを適用した.

# mkfs.ext4 /dev/sdb1
mke2fs 1.43.4 (31-Jan-2017)
/dev/sdb1 contains a ext4 file system
         last mounted on Thu Aug  9 09:24:02 2018
Proceed anyway? (y,N) y
Creating filesystem with 14648064 4k blocks and 3662848 inodes
Filesystem UUID: ff8045f4-5b10-46e7-9706-c398abd65d8f
Superblock backups stored on blocks:
         32768, 98304, 163840, 229376, 294912, 819200, 884736, 1605632, 2654208,
         4096000, 7962624, 11239424

Allocating group tables: done
Writing inode tables: done
Creating journal (65536 blocks): done
Writing superblocks and filesystem accounting information: done

上で作成したスワップパーティション (2) を初期化した.

# mkswap /dev/sdb5
Setting up swapspace version 1, size = 29.8 GiB (31999389696 bytes)
no label, UUID=16ebe1bc-52f3-456f-a3a7-e41ead2f4261

上で作成したパーティション (6) にファイルシステムを適用した.

# mkfs.ext4 /dev/sdb6
mke2fs 1.43.4 (31-Jan-2017)
Creating filesystem with 465917440 4k blocks and 116482048 inodes
Filesystem UUID: 7ae6af8e-ea8b-4331-95ed-89aae6ceae4c
Superblock backups stored on blocks:
         32768, 98304, 163840, 229376, 294912, 819200, 884736, 1605632, 2654208,
         4096000, 7962624, 11239424, 20480000, 23887872, 71663616, 78675968,
        102400000, 214990848

Allocating group tables: done
Writing inode tables: done
Creating journal (262144 blocks): done
Writing superblocks and filesystem accounting information: done

現在のディスクの状況を確認し, 二つのディスクが同じパーティション構成をしていることを確認した.

# parted -l
Model: ATA Hitachi HDS72302 (scsi)
Disk /dev/sda: 2000GB
Sector size (logical/physical): 512B/512B
Partition Table: msdos
Disk Flags:

Number  Start   End     Size    Type      File system     Flags
  1      1049kB  60.0GB  60.0GB  primary   ext4            boot
  2      60.0GB  2000GB  1940GB  extended
  5      60.0GB  92.0GB  32.0GB  logical   linux-swap(v1)
  6      92.0GB  2000GB  1908GB  logical   ext4


Model: ATA Hitachi HDS72302 (scsi)
Disk /dev/sdb: 2000GB
Sector size (logical/physical): 512B/512B
Partition Table: msdos
Disk Flags:

Number  Start   End     Size    Type      File system     Flags
  1      1049kB  60.0GB  60.0GB  primary   ext4
  2      60.0GB  2000GB  1940GB  extended
  5      60.0GB  92.0GB  32.0GB  logical   linux-swap(v1)
  6      92.0GB  2000GB  1908GB  logical   ext4

== fstab の設定 (予備ディスクのマウント)

予備ディスクを /bk, /home.bk にマウントするように設定する.

#/bk, /home.bk ディレクトリを作成する.

# # mkdir /bk /home.bk

/etc/fstab を書き換えるが,
まず, UUID を使って fstab に記述するため, UUID を調べた.

# blkid
/dev/sda1: UUID="92358e51-7cac-4d7a-b359-8ad970e91163" TYPE="ext4" PARTUUID="79a09549-01"
/dev/sda5: UUID="c9e0929b-b1f7-438a-8e92-9814310b707f" TYPE="swap" PARTUUID="79a09549-05"
/dev/sda6: UUID="0c734c3f-e29f-48e0-a336-6dbd76fae769" TYPE="ext4" PARTUUID="79a09549-06"
/dev/sdb1: UUID="ff8045f4-5b10-46e7-9706-c398abd65d8f" TYPE="ext4" PARTUUID="0e8f986c-01"
/dev/sdb5: UUID="16ebe1bc-52f3-456f-a3a7-e41ead2f4261" TYPE="swap" PARTUUID="0e8f986c-05"
/dev/sdb6: UUID="7ae6af8e-ea8b-4331-95ed-89aae6ceae4c" TYPE="ext4" PARTUUID="0e8f986c-06"

ここで表示された, /dev/sdb1, /dev/sdb6 の情報に基づいて, /etc/fstab を
編集した.

# vi /etc/fstab

2018 年には以下の 4 行を追加した.

# /dev/sdb1 is mounted to /bk
UUID=d454788f-9645-43b5-ba41-bbfbb72ded43 /bk             ext4    defaults,errors=remount-ro 0       2
# /dev/sdb6 is mounted to /home.bk
UUID=7ae6af8e-ea8b-4331-95ed-89aae6ceae4c /home.bk        ext4    defaults,usrquota          0       2

/etc/fstab の編集が終了したら, マウントした.

# mount -a

ディスクのマウント状態を確認した.

# df
ファイルシス   1K-ブロック      使用     使用可 使用% マウント位置
udev               8205628         0    8205628    0% /dev
tmpfs              1643376    181536    1461840   12% /run
/dev/sda1         57410400  52914624    1549780   98% /
tmpfs              8216864         0    8216864    0% /dev/shm
tmpfs                 5120         4       5116    1% /run/lock
tmpfs              8216864         0    8216864    0% /sys/fs/cgroup
/dev/sda6       1833369896 558720280 1181449744   33% /home
/dev/sdb6       1833369896     77852 1740092172    1% /home.bk
/dev/sdb1         57410400     53272   54411132    1% /bk

上の例では, /dev/sdb1, /dev/sdb6 がそれぞれ /bk, /home.bk にマウントされている.

= バックアップスクリプトの設置

バックアップの際には cron を用い, rsync によるバックアップを毎日自動的に行
う. またその rsync の結果をログに残す.

== バックアップ用スクリプトの用意

バックアップ用スクリプトを以下のように設置した.

* root ディレクトリ用:  rsync_localbk_root.sh を, /etc/cron.local/daily/220_rsync_localbk_root へ設置した.

# wget http://itpass.scitec.kobe-u.ac.jp/server/2011/system_backup/rsync_localbk_root.sh
# mv rsync_localbk_root.sh /etc/cron.local/daily/220_rsync_localbk_root

* home ディレクトリ用: rsync_localbk_home.sh を, /etc/cron.local/daily/225_rsync_localbk_home へ設置した.

# wget http://itpass.scitec.kobe-u.ac.jp/server/2011/system_backup/rsync_localbk_home.sh
# mv ./rsync_localbk_home.sh /etc/cron.local/daily/225_rsync_localbk_home

#(なお, スクリプト先頭の番号は, その他のスクリプトを置いた際, どれを優先して実行するかを決めるためのものである. 若い番号のものほど先に実行される).

設置したスクリプトに実行権限を与える.

# chmod 744 /etc/cron.local/daily/220_rsync_localbk_root
# chmod 744 /etc/cron.local/daily/225_rsync_localbk_home

= crontab の編集

/etc/crontab を編集する. 以下の一行があることを確認し, なければ追加する.

25 6    * * *   root    cd / && run-parts --report /etc/cron.local/daily   |mail -s "`hostname -f` daily run outputs" itpadmin@itpass.scitec.kobe-u.ac.jp

= バックアップログファイルの作成

#ログファイルのためのディレクトリとファイルを作成しておく.
#なお, このログファイルの場所は ((<#バックアップ用スクリプトの用意|URL:#バックアップ用スクリプトの用意>))
#で用意した 220_rsync_localbk_root と 225_rsync_localbk_home 内の LOGFILE を書き換えることで変更できる.

#ディレクトリ /var/log/rsync-log がなければ作成し, その中にログ用のファイルを作成する.
ディレクトリ /var/log/rsync-log の中にログ用のファイルを作成した.

# # mkdir /var/log/rsync-log
# cd /var/log/rsync-log
# touch localbk_root.log localbk_home.log


= バックアップログファイルの logrotate の設定

#rsync のログを 1 週間毎に分割する．
/etc/logrotate.d/ 以下に rsync_localbk_root という設定ファイルを作成した.

# vi /etc/logrotate.d/rsync_localbk_root

以下の内容を書き込んだ.

/var/log/rsync-log/localbk_root.log {
     weekly
     create 0644 root root
     rotate 12
}

同様に rsync_localbk_home も作成した.

# vi /etc/logrotate.d/rsync_localbk_home

以下の内容を書き込んだ.

/var/log/rsync-log/localbk_home.log {
     weekly
     create 0644 root root
     rotate 12
}

= バックアップのテスト

バックアップをテストした.

# cd /etc/cron.local/daily/
# ./220_rsync_localbk_root
# ./225_rsync_localbk_home

バックアップができているか, ログファイルで確認した.


= 本サーバから予備サーバへのバックアップの停止

#ローカルバックアップが cron によってうまく実行されたことを確認した後, 本サーバから予備サーバへのバックアップを止める.
本サーバから予備サーバへのバックアップを行っているスクリプトの実行権限を消した.


# chmod 644 /etc/cron.local/daily/230_rsync_itpassbk


= 参考文献

((<[ITPASS2017]ローカルでのバックアップの設定>))


[((<ITPASS[((<[ITPASS2018]2018年度サーバ構築・運用ドキュメントログ>)) へ戻る]