排解因核心異常終止而導致的 Linux VM 啟動問題

本文提供疑難排解資訊，說明如何解決 VM 因核心恐慌錯誤而停止回應的問題。

事前準備

  • 如要在 Cloud Logging 中記錄序列埠輸出內容，請先熟悉 Cloud Logging。
  • 如果尚未設定驗證，請先完成設定。 驗證可確認您的身分，以便存取 Google Cloud 服務和 API。如要從本機開發環境執行程式碼或範例，可以選取下列任一選項，向 Compute Engine 進行驗證：

    Select the tab for how you plan to use the samples on this page:

    Console

    When you use the Google Cloud console to access Google Cloud services and APIs, you don't need to set up authentication.

    gcloud

    1. Install the Google Cloud CLI. After installation, initialize the Google Cloud CLI by running the following command: 

      gcloud init

      If you're using an external identity provider (IdP), you must first sign in to the gcloud CLI with your federated identity.

    2. Set a default region and zone.

      3. REST

      如要在本機開發環境中使用本頁的 REST API 範例，請使用您提供給 gcloud CLI 的憑證。

        Install the Google Cloud CLI. After installation, initialize the Google Cloud CLI by running the following command: 

        gcloud init

        If you're using an external identity provider (IdP), you must first sign in to the gcloud CLI with your federated identity.

      詳情請參閱 Google Cloud 驗證說明文件中的「使用 REST 進行驗證」。

核心錯誤

如果核心無法正確載入訪客 OS 開機所需的initramfs 模組，就會發生核心恐慌。

如果核心不知道如何處理特定要求，也可能發生核心恐慌，並透過停止運作來保護自己。在執行 RedHat、SUSE、CentOS 或 Ubuntu 的 Compute Engine VM 上，可能會發生核心恐慌。

常見錯誤訊息

以下列出一些最常見的參考用核心恐慌事件：

Kernel panic - not syncing: hung_task: blocked tasks
 
Kernel Panic - not syncing: VFS: Unable to mount root fs on unknown-block(0,0)

Kernel panic - not syncing: NMI: Not continuing
 
Kernel panic - not syncing: out of memory. panic_on_oom is selected
 
Kernel panic - not syncing: Fatal Machine check

常見原因

造成核心恐慌錯誤的原因有很多，常見原因包括：

  • grub.cfg 檔案中沒有與核心對應的 initramfs 檔案相關項目。
  • 核心安裝期間，系統不會在 /boot 目錄中產生 initramfs 檔案。
  • initramfs 檔案只產生部分內容或已毀損。

問題

如果 VM 執行個體發生核心恐慌，常見的症狀是核心不允許您連線至 VM，即使使用序列主控台也一樣。

您應檢查序列主控台記錄，找出訪客 OS 載入的核心，例如：

[    0.000000] Initializing cgroup subsys cpu
[    0.000000] Initializing cgroup subsys cpuacct
[    0.000000] Linux version 3.10.0-1160.95.1.el7.x86_64 (mockbuild@x86-vm-42.build.eng.bos.redhat.com) (gcc version 4.8.5 20150623 (Red Hat 4.8.5-44) (GCC) ) #1 SMP Thu Aug 10 10:46:21 EDT 2023
同時檢查核心恐慌錯誤。這個錯誤通常會在 VM 啟動時的 Kernel 行，或多個堆疊呼叫追蹤記錄的序列控制台記錄結尾出現。

以下範例顯示因 initramfs 問題而導致的核心恐慌事件：

[    1.520840] No filesystem could mount root, tried:
[    1.520840]
[    1.521964] Kernel panic - not syncing: VFS: Unable to mount root fs on unknown-block(0,0)
[    1.523495] CPU: 1 PID: 1 Comm: swapper/0 Not tainted 3.10.0-1160.95.1.el7.x86_64 #1
[    1.524932] Hardware name: Google Google Compute Engine/Google Compute Engine, BIOS Google 10/11/2022
[    1.526901] Call Trace:
[    1.527421]  dump_stack+0x41/0x60
[    1.527978]  panic+0xe7/0x2ac
[    1.528578]  mount_block_root+0x2be/0x2e6
[    1.529693]  ? do_early_param+0x95/0x95
[    1.530441]  prepare_namespace+0x135/0x16b
[    1.531237]  kernel_init_freeable+0x203/0x22d
[    1.532081]  ? rest_init+0xaa/0xaa
[    1.532808]  kernel_init+0xa/0x103
[    1.533395]  ret_from_fork+0x35/0x40
[    1.535229] Kernel Offset: 0x23a00000 from 0xffffffff81000000

解決核心恐慌錯誤

如要解決核心恐慌錯誤，請按照下列步驟操作：

  1. 連線至序列控制台，並從 Google Cloud 控制台登入 VM。

  2. 在 Google Cloud 控制台中，按一下 VM 的「Reset」(重設)。

  3. GRUB 啟動畫面顯示後，選取先前可正常運作的 Kernel 或救援 Kernel，然後啟動系統。這會導致 VM 以所選核心啟動。

    核心錯誤

  4. VM 可供存取後，您就能啟動與 VM 的 SSH 連線。

  5. 找出問題原因，並據此採取進一步行動。

    舉例來說，如果 initramfs 檔案遺失或損毀，請完成下列步驟：

    1. 使用 dracut 指令，產生與原始核心對應的 initramfs 檔案：

      dracut -f /boot/initramfs-KERNEL_VERSION.img KERNEL_VERSION

      將 KERNEL_VERSION 替換為 VM 目前的 核心版本。例如：3.10.0-1160.95.1.el7.x86_64。

    2. 使用 grub2-mkconfig 指令更新 grub2.cfg 檔案，例如：

      grub2-mkconfig -o /boot/grub2/grub.cfg

    3. 產生 initramfs 檔案後，即可重新啟動 VM，不會發生任何錯誤。