管理區域性磁碟的失敗情形

本文件說明可能會中斷區域磁碟運作的各種情況，以及如何管理這些情況。

事前準備

• 複習區域磁碟和容錯機制的基礎知識。詳情請參閱「 關於同步磁碟複製」。
• 如果尚未設定，請先設定驗證機制。「驗證」是指驗證身分，以便存取 Trusted Cloud by S3NS 服務和 API 的程序。如要從本機開發環境執行程式碼或範例，請選取下列任一選項，以便對 Compute Engine 進行驗證：
  

  Select the tab for how you plan to use the samples on this page:

  gcloud

  1. After installing the Google Cloud CLI, sign in to the gcloud CLI with your federated identity and then initialize it by running the following command:

     gcloud init

  2. Set a default region and zone.

  REST

  如要在本機開發環境中使用本頁的 REST API 範例，請使用您提供給 gcloud CLI 的憑證。

  After installing the Google Cloud CLI, sign in to the gcloud CLI with your federated identity and then initialize it by running the following command:

  gcloud init

  詳情請參閱 Trusted Cloud 驗證說明文件中的「驗證以使用 REST」。

必要的角色

如要取得使用複本復原檢查點來遷移區域磁碟資料所需的權限，請要求管理員授予您下列 IAM 角色：

• 如要使用複本復原檢查點來遷移區域磁碟資料，請按照下列步驟操作： Compute 執行個體管理員 (v1) (roles/compute.instanceAdmin.v1) 在專案中
• 如要查看區域性磁碟指標 (下列任一項)：
  • 專案的監控檢視者 (roles/monitoring.viewer)
  • Monitoring 編輯者 (roles/monitoring.editor) 專案

如要進一步瞭解如何授予角色，請參閱「管理專案、資料夾和機構的存取權」。

這些預先定義的角色包含使用複本復原檢查點遷移區域磁碟資料所需的權限。如要查看確切的必要權限，請展開「必要權限」部分：

您或許還可透過自訂角色或其他預先定義的角色取得這些權限。

限制

您無法在處於多重寫入模式的磁碟上使用 force-attach 作業。

失敗情況

使用區域磁碟時，當裝置完全複製，資料會自動複製到區域中的兩個可用區。只有在兩個備用資源中常駐時，才會確認寫回 Compute 執行個體。

如果某個區域的複寫作業失敗或速度緩慢，磁碟複寫狀態就會切換為「降級」。在這個模式中，寫入作業會在備用資源中持續保留後才會確認。

如果 Compute Engine 偵測到可恢復複寫作業，則會將在另一個備用資源進入降級狀態後寫入該備用資源的資料同步至兩個區域，磁碟也會恢復為已完全複製的狀態。這項轉換作業完全自動化。

RPO 和 RTO 在裝置處於降級狀態時未定義。為避免磁碟在降級狀態下運作時發生故障，導致資料和可用性損失，建議您定期使用標準快照備份區域磁碟。您可以還原快照來復原磁碟。

區域故障

複本磁碟 (或區域磁碟) 會同步複製至主要和次要可用區的磁碟複本。當可用區副本無法使用時，就會發生可用區故障。主要或次要區域可能會發生區域失敗，原因如下：

• 發生區域性中斷服務。
• 備援機制在寫入作業時速度過慢。

下表列出您可能會遇到的各種區域故障情境，以及每個情境的建議動作。在上述每個情況中，我們假設主要區域副本在初始狀態下是正常且同步的。

應用程式和 VM 故障

如果服務因 VM 設定錯誤、OS 升級失敗或其他應用程式故障而中斷，您可以將地區磁碟 force-attach 至與健康備援機制位於同一區域的運算執行個體。

使用 force-attach 將地區磁碟移轉

如果主要區域發生故障，您可以使用強制連接作業，將Hyperdisk 平衡高可用性磁碟區容錯移轉至另一個區域的運算執行個體。

當主要區域發生故障時，您可能無法從執行個體卸離磁碟，因為無法存取執行個體來執行卸離作業。強制連結功能可讓您將Hyperdisk 平衡高可用性磁碟區連結至運算執行個體，即使該磁碟區已連結至其他執行個體也一樣。

完成強制連接操作後，Compute Engine 會防止原始執行個體寫入區域磁碟。使用強制連接作業可讓您安全地重新取得資料存取權限並恢復服務。您也可以選擇在執行強制連接作業後，手動關閉 VM 執行個體。

如要強制將現有磁碟連結至雲端運算執行個體，請選取下列其中一項工作：

gcloud compute instances attach-disk VM_NAME \
    --disk DISK_NAME --disk-scope regional \
    --force-attach

POST https://compute.s3nsapis.fr/compute/v1/projects/PROJECT_ID/zones/ZONE/instances/VM_NAME/attachDisk?forceAttach=true

{
 "source": "projects/PROJECT_ID/regions/REGION/disks/DISK_NAME"
}

將開機磁碟容錯移轉至次要執行個體

您只能將一個開機磁碟連結至 Compute 執行個體。如果區域開機磁碟發生錯誤，請根據次要運算執行個體是否已存在，使用下列任一方法：

• 如果沒有有效的待命 VM，請在次要區域中建立新的執行個體。建立第二個執行個體時，請使用地區磁碟做為開機磁碟，如使用地區開機磁碟建立新的 VM 一文所述。

• 如果次要區域中有待命 VM，請按照「將地區開機磁碟附加至 VM」一文的說明，將待命 VM 的開機磁碟替換為地區開機磁碟。

使用複本復原檢查點來復原區域磁碟

複本復原檢查點代表完全複製的Hyperdisk 平衡高可用性磁碟區的最近一次異常狀況一致時間點。Compute Engine 可讓您針對降級的地區磁碟，從複本復原檢查點建立標準快照。

在極少數情況下，當磁碟降級時，與最新磁碟資料同步的區域備用資源也可能在非同步備用資源趕上之前失敗。您無法將磁碟強制連結至任一區域中的運算執行個體。複本磁碟將無法使用，您必須將資料遷移至新的磁碟。在這種情況下，如果您沒有任何可用於磁碟的現有標準快照，您還是可以使用從複本復原檢查點建立的標準快照，從不完整的複本復原磁碟資料。如需詳細步驟，請參閱「遷移及復原磁碟資料的程序」。

遷移及復原磁碟資料的程序

如要使用複本復原檢查點來復原及遷移區域磁碟的資料，請執行下列步驟：

1. 針對受影響的Hyperdisk 平衡高可用性磁碟區，從複本復原檢查點建立標準快照。

   您可以只使用 gcloud CLI 或 REST，從磁碟的複本復原檢查點建立磁碟的標準快照。

   gcloud

   如要使用複本復原檢查點建立快照，請使用 gcloud compute snapshots create 指令 。請加入 --source-disk-for-recovery-checkpoint 旗標，指定您要使用複本復原檢查點建立快照。排除 --source-disk 和 --source-disk-region 參數。

   gcloud compute snapshots create SNAPSHOT_NAME \
       --source-disk-for-recovery-checkpoint=SOURCE_DISK \
       --source-disk-for-recovery-checkpoint-region=SOURCE_REGION \
       --storage-location=STORAGE_LOCATION \
       --snapshot-type=SNAPSHOT_TYPE
   

   請依指示取代下列項目：

   • DESTINATION_PROJECT_ID：您要建立快照的專案 ID。
   • SNAPSHOT_NAME：快照的名稱。
   • SOURCE_DISK：您要用來建立快照的來源磁碟名稱或完整路徑。如要指定來源磁碟的完整路徑，請使用下列語法：

       projects/SOURCE_PROJECT_ID/regions/SOURCE_REGION/disks/SOURCE_DISK_NAME
       

     如果您指定來源磁碟的完整路徑，可以排除 --source-disk-for-recovery-checkpoint-region 標記。如果您只指定磁碟名稱，則必須加入此標記。

     如要根據不同專案中來源磁碟的復原檢查點建立快照，您必須指定來源磁碟的完整路徑。

   • SOURCE_PROJECT_ID：來源磁碟的專案 ID，您可以使用該磁碟的檢查點建立快照。
   • SOURCE_REGION：來源磁碟的區域，您可以使用該區域的檢查點建立快照。
   • SOURCE_DISK_NAME：來源磁碟的名稱，您可以使用該磁碟的檢查點建立快照。
   • STORAGE_LOCATION：選用：您要儲存快照位置的 Cloud Storage 多地區或 Cloud Storage 地區。您只能指定一個儲存位置。
     只有在您想覆寫快照設定中設定的預先定義或自訂預設儲存位置時，才使用 --storage-location 標記。
   • SNAPSHOT_TYPE：快照類型，可選「標準」或「封存」。如果未指定快照類型，系統會建立 STANDARD 快照。

   您只能在降級磁碟上使用備用資源復原檢查點來建立快照。如果在裝置已完全複製時，嘗試從複本復原檢查點建立快照，您會看到下列錯誤訊息：

   The device is fully replicated and should not create snapshots out of a recovery checkpoint. Please
   create regular snapshots instead.
   

   REST

   如要使用複本復原檢查點建立快照，請對 snapshots.insert 方法發出 POST 要求。請排除 sourceDisk 參數，並加入 sourceDiskForRecoveryCheckpoint 參數，指定您要使用檢查點建立快照。

   POST https://compute.s3nsapis.fr/compute/v1/projects/DESTINATION_PROJECT_ID/global/snapshots
   
   {
     "name": "SNAPSHOT_NAME",
     "sourceDiskForRecoveryCheckpoint": "projects/SOURCE_PROJECT_ID/regions/SOURCE_REGION/disks/SOURCE_DISK_NAME",
     "storageLocations": "STORAGE_LOCATION",
     "snapshotType": "SNAPSHOT_TYPE"
   }
   

   請依指示取代下列項目：

   • DESTINATION_PROJECT_ID：您要建立快照的專案 ID。
   • SNAPSHOT_NAME：快照的名稱。
   • SOURCE_DISK：您要用來建立快照的來源磁碟名稱或完整路徑。如要指定來源磁碟的完整路徑，請使用下列語法：

       projects/SOURCE_PROJECT_ID/regions/SOURCE_REGION/disks/SOURCE_DISK_NAME
       

     如果您指定來源磁碟的完整路徑，可以排除 --source-disk-for-recovery-checkpoint-region 標記。如果您只指定磁碟名稱，則必須加入此標記。

     如要根據不同專案中來源磁碟的復原檢查點建立快照，您必須指定來源磁碟的完整路徑。

   • SOURCE_PROJECT_ID：來源磁碟的專案 ID，您可以使用該磁碟的檢查點建立快照。
   • SOURCE_REGION：來源磁碟的區域，您可以使用該區域的檢查點建立快照。
   • SOURCE_DISK_NAME：來源磁碟的名稱，您可以使用該磁碟的檢查點建立快照。
   • STORAGE_LOCATION：選用：您要儲存快照位置的 Cloud Storage 多地區或 Cloud Storage 地區。您只能指定一個儲存位置。
     只有在您想覆寫快照設定中設定的預先定義或自訂預設儲存空間位置時，才使用 storageLocations 參數。
   • SNAPSHOT_TYPE：快照類型，可選「標準」或「封存」。如果未指定快照類型，系統會建立 STANDARD 快照。

   您只能在降級磁碟上使用備用資源復原檢查點來建立快照。如果在裝置已完全複製時，嘗試從複本復原檢查點建立快照，您會看到下列錯誤訊息：

   The device is fully replicated and should not create snapshots out of a recovery checkpoint. Please
   create regular snapshots instead.
   

2. 使用這個快照建立新的 Hyperdisk 平衡高可用性磁碟。建立新磁碟時，您可以從快照將資料還原至新磁碟，藉此從最新的複本復原檢查點復原所有資料。如需詳細步驟，請參閱「使用區域開機磁碟建立新執行個體」。

3. 將所有 VM 工作負載遷移至新建立的磁碟，並驗證這些 VM 工作負載是否正常運作。詳情請參閱「在區域或地區之間移動 VM」。

復原磁碟資料並將 VM 遷移至新建立的Hyperdisk 平衡高可用性磁碟後，您就可以恢復作業。

判斷備援復原查核點提供的 RPO

本節說明如何判斷 Hyperdisk 平衡高可用性磁碟的最新複本復原檢查點提供的 RPO。

可用區備用資源已完全同步

Compute Engine 會大約每 10 分鐘更新Hyperdisk 平衡高可用性磁碟的複本復原檢查點。因此，當區域副本完全同步時，RPO 大約為 10 分鐘。

區域性複本未同步

您無法查看備用復原檢查點的確切建立和重新整理時間戳記。不過，您可以使用下列資料，估算最新檢查點提供的 RPO 值：

• 已完全複製的磁碟狀態最近的時間戳記：您可以使用區域磁碟的 replica_state 指標 Cloud Monitoring 資料，取得這項資訊。檢查不同步備份的 replica_state 指標資料，判斷備份何時停止同步。由於 Compute Engine 每 10 分鐘會重新整理磁碟的檢查點，因此最近一次的檢查點重新整理作業可能在這個時間戳記前約 10 分鐘完成。
• 最近的寫入作業時間戳記：您可以使用區域磁碟的 write_ops_count 指標 Cloud Monitoring 資料，取得這項資訊。查看 write_ops_count 指標資料，判斷磁碟的最新寫入作業。

確定這些時間戳記後，請使用下列公式計算磁碟備份復原檢查點提供的近似 RPO。如果計算值小於零，則 RPO 實際上為零。

Approximate RPO provided by the latest checkpoint = (Most recent write operation timestamp - (Most recent timestamp of the fully replicated disk state - 10 minutes))

後續步驟

• 瞭解如何監控區域性磁碟的備份狀態和複製狀態。
• 瞭解如何判斷磁碟複製作業的確切狀態。
• 瞭解如何建立磁碟的快照。
• 瞭解如何使用地區磁碟建構高可用性服務。
• 瞭解如何在 Trusted Cloud by S3NS上建構可擴充且有彈性的網路應用程式。
• 請參閱災難復原規劃指南。