再起動後にディスクがマウントされない・起動しない(fstabの誤り)

ディスクを追加して/etc/fstabを編集し、再起動したらサーバーが起動しなくなった。fstabの1行の誤りで起きる、よくある、そして焦るトラブルです。

どんな症状か

再起動したあと、コンソールにYou are in emergency mode.と表示されて止まる、SSHで接続できなくなる、追加したディスクのマウント先が空のまま、といった症状です。多くの場合、直前に/etc/fstabを編集しています。

systemdは、fstabに書かれたファイルシステムをマウントできないと、それを必要とする起動の処理を進められず、緊急モードに入ります。存在しないUUIDや、作っていないマウント先、書き間違えたファイルシステムの種類が、よくある原因です。

原因を切り分ける

ステップ1:緊急モードからログを確認する

緊急モードでは、rootのパスワードを入力するとシェルが使えます(クラウドではシリアルコンソールを使います)。どのマウントに失敗したかを確認します。

$ journalctl -xb | grep -i -E 'mount|fstab' | tail
$ systemctl --failed

Failed to mount /dataやDependency failed for Local File Systemsのような行から、失敗した行が分かります。

ステップ2:fstabの内容を検査する

$ sudo findmnt --verify
/mnt/data
   [E] unreachable source: UUID=1234-dead: No such file or directory
   [E] target '/mnt/data' does not exist

0 parse errors, 2 errors, 0 warnings

findmnt --verifyは、fstabの各行について、デバイスとマウント先が存在するかを検査します。この例では、存在しないUUIDを指定していること、マウント先のディレクトリを作っていないことが分かります。

ステップ3:正しいUUIDを確認する

$ sudo blkid

fstabでは、/dev/sdb1のようなデバイス名より、UUIDで指定するのが基本です。デバイス名は、ディスクの追加や接続の順番で変わることがあるためです。blkidの出力から、対象のパーティションのUUIDとTYPEを確認し、fstabの記述と一致しているかを比べます。

解決方法

  • 緊急モードで止まっている場合:
    ルートファイルシステムが読み取り専用でマウントされていることがあるため、mount -o remount,rw /で書き込めるようにしてから、/etc/fstabの誤った行を修正するか、行頭に#を付けて無効にし、再起動します。
  • マウント先が無い場合:
    sudo mkdir -p /mnt/dataで作成します。
  • UUIDや種類が違う場合: blkidの結果に合わせて書き直します。

再発を防ぐために

fstabを編集したら、再起動する前に次の2つを実行し、エラーが出ないことを確認します。

$ sudo findmnt --verify   # 書式・デバイス・マウント先の検査
Success, no errors or warnings detected
$ sudo mount -a           # fstabの内容で、実際にマウントしてみる(何も表示されなければ成功)

また、起動に必須ではないデータ用のディスクには、オプションにnofailを付けておくと、そのディスクが見つからなくても起動の処理が止まらなくなります。

/etc/fstab(データ用ディスクの例)
UUID=3f2a9c1e-5b7d-4e8a-9c0d-1e2f3a4b5c6d  /data  ext4  defaults,nofail  0  2
注意:
クラウドのサーバーは、緊急モードに入るとSSHで接続できず、復旧に手間がかかります。
fstabを編集する前には、sudo cp /etc/fstab /etc/fstab.bakでバックアップを取っておきましょう。
関連する章:
fstabの書き方は上級「ファイルシステムの運用(fstab・スワップ・マウント)」、マウントの基本は中級「ファイルシステムのマウントと整合性維持」で扱っています。

この記事の内容を練習できる課題

同じような状況を、ブラウザの練習用ターミナルで再現して試せます。本番のサーバーで慌てないよう、手順を一度なぞっておきましょう。

ほかの課題は、練習問題の一覧から選べます。