Azure 儲存體動作中的可靠性

Azure 儲存體 Actions 是一個完全託管的平台,能自動化 Azure Blob 儲存體 和 Azure Data Lake Storage 的資料管理任務。 你會排程儲存任務,針對你的儲存帳戶執行。 你可以設定任務來刪除 blob、設定 blob 標籤,並根據資料的存留時間改變存取層級。

當您使用 Azure 時, 可靠性是共同的責任。 Microsoft 提供一系列功能以支援韌性與復原。 您有責任瞭解這些功能在您使用的所有服務中如何運作,並選取符合業務目標和正常運作時間目標所需的功能。

本文說明如何讓 Azure 儲存體 Actions 對暫時性故障、組態問題、可用性區域失效、區域性故障及服務維護具有韌性。 同時也說明備份與還原選項,以及關於 Azure 儲存體 Actions 服務層級協議(SLA)的關鍵資訊。

Important

當你考慮 Azure 儲存體 Actions 的可靠性時,請考慮每個有儲存任務分配的儲存帳號。 Microsoft 負責管理 Storage Actions 服務的可用性。 你必須選擇符合工作負載可靠性需求的儲存帳戶冗餘配置。 儲存帳號中斷可能導致分配的儲存任務無法執行,即使儲存操作控制平面仍然可用。 關於儲存帳戶冗餘配置的可靠性特性,請參見 Azure Blob 儲存體 中的可靠性。

可靠性的生產部署建議

針對生產工作負載,我們建議您:

  • 為每個目標儲存帳號設定符合你可靠性需求的冗餘選項。 對於大多數生產工作負載,至少使用區域冗餘儲存(ZRS)。 如果你需要對區域性故障的韌性,而你的儲存帳號位於配對區域,請使用地理區域冗餘儲存(GZRS)。 儲存任務執行繼承目標儲存帳號的可靠性特性。

  • 在使用儲存任務刪除 blob 之前,先啟用 blob 軟刪除。 在每個目標儲存帳號啟用 Blob 軟刪除,這樣你就能恢復儲存任務在保留期間不小心刪除的 blob。

  • 避免儲存體工作與其他生命週期管理原則重疊。 請勿將儲存體工作與其他生命週期管理原則設定為對相同的 blob 執行衝突的操作。 例如,若 Blob 儲存體 生命週期管理策略嘗試刪除相同的 blob,儲存任務刪除操作可能會失敗。

  • 在套用儲存動作設定前,請先驗證它。 在撰寫任務條件時,使用 條件預覽 來進行重點驗證,並在啟用作業前用 模擬跑 驗證完整指派。

可靠性架構概觀

本節說明服務運作中從可靠性角度來看最為重要的部分。 本節介紹邏輯架構,包含你部署和使用的部分資源與功能。 它還討論了物理架構,其中提供了有關服務如何在幕後工作的詳細信息。

邏輯架構

當你使用 Azure 儲存體 Actions 時,你會建立一個或多個儲存任務資源。 每個儲存任務都包含條件,用來選取物件以及要對相符物件執行的操作。 要對儲存帳號執行儲存任務,你需要建立 儲存任務指派。 該指派作為儲存帳戶資源的一部分被儲存,並識別目標物件、任務執行的時間與頻率,以及執行報告的存放地點。 當任務執行達到該 Completed 狀態時,服務會寫入執行報告至指派中指定的位置。

你負責設定每個指派,並為儲存任務的管理身份指派適當的 Azure 角色。

實體架構

Azure 儲存體 Actions 有兩個與可靠性相關的層面:

  • 控制平面:請求會透過 Azure Resource Manager 流向 Azure 儲存體 Actions 資源提供者,該提供者負責管理操作及儲存任務與指派的非同步配置工作流程。

  • 資料平面: 包含排程器、評估儲存任務狀況並執行針對目標儲存帳戶所設定作業的背景工作程序,以及報告元件。 這些元件在 Azure 儲存體 基礎結構上執行。

對瞬態故障的彈性

暫時性錯誤是元件中的短暫間歇性失敗。 它們經常出現在雲端等分散式環境中,而且是作業的一般部分。 暫時性錯誤會在短時間內自行修正。 請務必確保您的應用程式能妥善處理暫時性錯誤,通常透過重試受影響的請求來進行。

所有雲端託管應用程式在與任何雲端託管的 API、資料庫及其他元件通訊時,都應遵循 Azure 暫態故障處理指引。 如需相關資訊,請參閱處理瞬態故障的建議。

暫時性故障可能以兩種主要方式影響 Azure 儲存體 Actions:

  • 管理運作: 如果你自動化管理儲存動作,例如部署或修改儲存任務,你就要負責處理自動化中的暫時性故障。 使用有限次重試,並在每次嘗試之間保留適當的延遲。

  • 任務執行:當目標儲存帳戶限制作業速率時,Azure 儲存體 Actions 會暫停並在延遲後重試。 只要指派作業持續有進展,Storage Actions 就會在整個工作流程的生命週期內持續重試。 如果指派在列出或處理 Blob 四小時內沒有任何進度,儲存體動作會終止執行,以便分派另一個指派。

Azure 儲存體 Actions 一次只處理每個目標儲存帳戶的一個指派。 它會自我調節工作執行,讓目標儲存體帳戶上的應用程式工作負載優先處理。 執行規模取決於帳戶中可用的交易容量。 當可用的交易容量減少時,任務執行可能會被限速,導致完成時間更長。 如需詳細資訊,請參閱儲存體帳戶可用交易容量的規模相依性。

並非所有任務執行失敗都是暫時性的。 例如,某任務可能因受控識別缺乏所需權限、請求數量超過規模限制,或目標儲存帳號阻擋網路存取而失敗。 你負責監控任務狀態、指標和儀表板,並修正這些錯誤。 只有執行達到Completed狀態時,才會建立執行報告。 失敗與略過的執行不會產生執行報告。 將實際執行時間與指派排程進行比較,以找出未發生的執行。 有關識別與解決任務錯誤的資訊,請參見 儲存任務故障排除。

對配置問題的韌性

儲存任務條件決定任務可操作的物件,錯誤的條件或操作可能會影響非預期的物件。 Microsoft 會依據每個指派的設定來執行指派。 您必須在允許指派修改資料之前先驗證該指派,尤其是當指派包含具破壞性或不可逆的操作時。

請使用以下驗證方法:

  • 狀況預覽:在撰寫任務條件時,可以使用 Azure 入口網站的預覽功能或 Preview Actions REST API 來評估最多 5,000 個 blob 的樣本。 預覽會立即回傳結果,並不會產生執行報告。

  • 模擬跑: 在啟用指派執行操作前,先建立 模擬跑 以供最終驗證。 模擬執行是在不執行設定操作的情況下,評估指派範圍內的每個 blob。 它以非同步方式執行,類似一般指派,並產生 CSV 執行報告。 檢視報告以確認哪些 blob 符合條件,以及任務會執行哪些操作。

驗證能降低非預期操作的風險,但它無法取代資料保護。 在使用儲存任務刪除 blob 之前,先在每個目標儲存帳號啟用 軟刪除 。 軟刪除允許你在設定的保留期間內恢復已刪除的 blob。

同時檢視儲存任務指派及其他處理相同 blob 的資料管理政策。 不要設定重疊的任務或原則來執行衝突的操作。 例如,若 Blob 儲存體 生命週期管理策略嘗試刪除相同的 blob,儲存任務刪除操作可能會失敗。

對可用性區域故障的抵抗力

可用性區域 是 Azure 區域內物理上獨立的資料中心群組。 當某個區域發生故障時,服務可以切換至其他剩餘的區域。

Azure 儲存體 Actions 控制平面是區域備援的。 Microsoft 會自動管理其跨多個可用性區域的分散配置,你不需要選擇這些區域。 在可用性區域故障期間,您可以繼續管理儲存任務與分配。

任務執行的韌性取決於每個目標儲存帳號的冗餘配置,因為任務是根據這些帳號中的資料運作。 若任務執行必須在區域故障時繼續,請為每個目標帳號設定 區域備援儲存體選項(ZRS、GZRS 或 RA-GZRS)。

下列範例顯示儲存體動作控制平面,以及以三區區域中的區域備援帳戶為目標的工作。 當某一區域無法使用時,控制平面與目標帳號均可繼續運作:

圖示顯示儲存動作控制平面及跨越三個可用區域的 ZRS 目標儲存帳號。

圖示顯示可用區間1、2和3。 Storage Actions 控制平面涵蓋三個區域,並包含儲存任務。 目標儲存體帳戶使用 ZRS,並且跨越所有三個區域。

相較之下,LRS 目標帳戶並非區域冗餘。 以下範例中,控制平面跨越三個可用區域,目標帳戶顯示在可用區域 1,以說明不跨可用區域的帳戶。 如果託管目標帳戶的區域變得無法使用,控制平面仍會保持可用,但在帳戶復原之前,工作無法對目標帳戶執行:

圖示顯示跨越三個可用區域的 Storage Actions 控制平面,以及區域 1 中顯示的 LRS 目標帳戶。

圖示顯示可用區間1、2和3。 Storage Actions 控制平面涵蓋三個區域,並包含儲存任務。 目標儲存帳戶使用 LRS,且只出現在可用性區域 1,以說明 LRS 不提供可用性區域備援。

Requirements

  • 區域支援: 當你設定儲存任務指派時,儲存任務和目標儲存帳號必須在同一區域。 若要讓工作執行能夠承受區域失敗,請選擇同時支援 Azure 儲存體動作與可用性區域的區域。

  • 儲存體帳戶設定: 為每個目標帳戶設定可用性區域備援儲存體選項。 本地冗餘儲存(LRS)、地理冗餘儲存(GRS)及讀取存取地理冗餘儲存(RA-GRS)在主要區域內不提供區域冗餘。

Considerations

控制平面區域冗餘無法在目標儲存帳號無法使用時,讓任務執行具備區域韌性。 分別評估每個目標帳戶的冗餘配置。

Cost

儲存動作控制平面的區域冗餘是自動的,且啟用此功能不需額外支付 Storage Actions 費用。 工作執行、目標物件及叫用操作的標準使用費仍會照常收取。 欲了解更多資訊,請參閱 Azure 儲存體 Actions 定價。

你為每個目標儲存帳號選擇的冗餘選項會影響你的 Azure 儲存體 費用。 如需詳細資訊,請參閱 Blob 儲存體定價。

設定可用性區域支援

Storage Actions 控制平面會自動提供區域備援。 你不會為儲存任務或指派分別設定區域冗餘。

為了讓任務執行對可用性區域失效具備韌性,在建立每個目標儲存帳號時,選擇區域冗餘儲存選項,或更改現有帳號的冗餘設定。

所有區域都狀況良好時的行為

本節說明當儲存動作控制平面可用、目標儲存帳號使用區域冗餘儲存選項,且所有可用區域運作時,應預期的情況。

  • 跨區域操作:Microsoft 將儲存動作控制平面基礎設施分散至不同可用區域。 任務執行會針對每個目標儲存帳號運作,Azure 儲存體 會透明地將請求分散到承載該帳號的基礎架構。

  • 跨區域資料複寫: Storage Actions 不會儲存或複寫任務處理的 blob 資料。

    Azure 儲存體 會同步複製使用區域備援儲存選項的帳戶中資料,在主要區域內跨可用性區域。 Azure 儲存體 在將資料複製到帳戶使用的可用性區域後,才會完成寫入作業。

區域失敗期間的行為

本節說明當儲存動作控制平面可用、目標儲存帳號使用區域冗餘儲存選項,且某個可用區域發生故障時,會發生什麼情況。

  • 偵測與回應:Microsoft 偵測並回應影響儲存動作控制平面的故障。

    對於使用區域冗餘儲存選項的目標帳號,Azure 儲存體 會自動將任務執行與儲存操作路由到健康區域。 您不需要啟動容錯移轉。

  • 通知: Microsoft 不會在區域關閉時自動通知您。 不過,你可以使用 Azure 服務健康狀態 來了解服務整體健康狀況,包括任何區域故障,並且可以設定 Service Health 警示來通知你問題。
  • 作用中的要求: 以可用區域備援帳戶為目標的儲存體工作會繼續進行。 針對無法存取的帳戶的任務可能會失敗。

    擱置中的單次執行指派仍可能會被挑選執行。 中斷或失敗的執行作業可能需要你手動重新排程,視處理停止於何處而定。

  • 預期的資料遺失:儲存體動作不會另外儲存您 Blob 資料的副本。 預期的資料遺失情況取決於每個目標帳戶的冗餘配置。 當帳號使用區域冗餘儲存選項時,Azure 儲存體 會同步複製其資料,在主要區域中的可用性區域之間,因此,單一可用性區域故障預期不會導致已成功完成的寫入發生資料遺失。

  • 預期的停機時間: Storage Actions 控制平面在區域故障時仍可使用。

    只要目標儲存帳號仍可存取,任務執行便會持續進行。 若帳號無法使用,例如受影響區域的 LRS 儲存帳號,受影響的執行可能會失敗。

  • 重新分發:Microsoft 負責管理儲存體動作控制平面的回應與重新分發。

    Azure 儲存體會自動將使用區域備援儲存體選項之帳戶的操作路由傳送至狀況良好的區域。 客戶無需採取任何動作。

區域復原

當失敗區域恢復時,Microsoft 會恢復正常的控制平面散佈。 Azure 儲存體會還原區域備援帳戶的正常作業。 排定的任務分配會依排程繼續進行。

定期任務會繼續依照其設定的時間表執行。 擱置中的單次執行指派仍可能會被挑選執行。 檢查受中斷影響的執行狀態。 視處理停止於哪個階段而定,你可能需要重新排程中斷或失敗的執行。

測試區域失敗

Microsoft 管理儲存動作控制平面及區域冗餘儲存帳號的區域分佈、故障轉移與恢復。 您無須測試平台區域失敗。 請測試您的操作程序,確認您能夠找出失敗的工作操作,並安全地重新執行這些操作。

對區域範圍故障的復原能力

區域性故障期間儲存任務執行的韌性取決於每個目標儲存帳號的冗餘配置。 如果目標帳戶使用 地理冗餘儲存選項 (GRS、GZRS、RA-GRS 和 RA-GZRS),該儲存帳戶可以容錯移轉到其配對區域,未來的儲存任務執行仍可在新的主區域繼續執行。

地理備援目標儲存體帳戶

對於地理冗餘儲存帳號,目前接受寫入操作的區域是 主要區域。 Azure 儲存體 會非同步地將資料複製到帳號的配對區域,也就是次要區域。

儲存體工作會在其主要區域中對帳戶進行操作。 帳號故障轉移後,先前的次要區域會成為新的主要區域,未來執行的儲存任務會在該主要區域自動執行。 Azure 儲存體 Actions 不需要另外的故障轉移動作。

Requirements

Cost

地理冗餘儲存配置會在次要區域的複製與儲存產生費用。 如需詳細資訊,請參閱 Blob 儲存體定價。

設定多區域支援

建立 目標儲存帳號時,選擇地理冗餘儲存選項,或更改現有帳號的 冗餘配置 。

如果你在目標帳戶使用非地理冗餘選項時建立儲存任務指派,之後將該帳戶轉換為 GRS、GZRS、RA-GRS 或 RA-GZRS,請在啟動客戶管理的帳戶故障轉移前更新該指派。 您可以變更任何指派屬性。 此更新會導致 Storage Actions 控制平面偵測到帳戶新的異地備援配置。

當所有區域都正常時的行為

本節說明當目標儲存帳號使用地理冗餘儲存選項,且主要與次要區域皆可運作時,會發生什麼情況。

  • 跨區域作業: 在正常運作期間,儲存任務定義、指派及目標儲存帳戶位於主要區域。 次要區域不處理儲存任務操作。

  • 跨區域資料複製:Azure 儲存體 Actions 不會獨立複製任務處理的 blob 資料。

    Azure 儲存體 會非同步地將資料從主要區域複製到次要區域。 由於複製是非同步的,最近的變更可能尚未存在於次要區域。

區域失敗期間的行為

本節說明當使用地理冗餘儲存選項的目標儲存帳戶其主要區域無法使用時,應預期的情況。

  • 偵測與回應:儲存帳號故障轉移可以由客戶管理或由 Microsoft 管理。 Microsoft 管理的容錯移轉僅保留給特殊情況使用,且可能只在長時間中斷後才會發生,因此請勿在災害復原計畫中倚賴此機制。 請依照 Blob 儲存體 故障轉移指引決定是否以及何時啟動客戶管理的故障轉移。

    Azure 儲存體 Actions 不需要另外的故障轉移動作。 不過,如果你在目標帳戶使用 LRS 時建立了該指派,後來又轉成 GRS 或 GZRS,請在啟動客戶管理的帳戶故障轉移前更新指派。 欲了解更多資訊,請參閱 配置多區域支援。

  • Notification: Microsoft 不會自動通知你區域故障。 不過,你可以使用 Azure 服務健康狀態 來了解整體服務的健康狀況,包括任何區域故障,並且可以設定 服務健康警示 來通知你問題。
  • 進行中的要求: 在儲存帳戶故障轉移期間,主要與次要儲存帳戶端點暫時無法使用。 正在執行中的儲存工作執行個體可能會失敗。 故障轉移後,檢查受影響任務執行的狀態,並視情況重執行失敗或未完成的操作。

    對於重複任務,若上一次迭代仍在進行中,下一次迭代排程時,Storage Actions 會跳過新迭代。 下一次迭代會在前一次迭代結束後,依其指定觸發時間執行。

  • 預期資料遺失:Azure 儲存體 Actions 不會維護你 blob 資料的獨立副本。

    在非計畫故障轉移期間,若近期變更未複製到次要區域,可能會遺失。 任務在進行中失敗,也可能只完成部分目標物件的操作。 故障轉移後,檢查受影響任務執行的狀態,並視情況重執行失敗或未完成的操作。 關於儲存帳號恢復點與資料遺失的詳細資訊,請參見 Blob 儲存體 區域失效期間的預期資料遺失。

  • 預期的停機時間: 在故障轉移前,當目標儲存帳號無法使用時,儲存任務無法進行。

    在故障轉移期間,儲存體帳戶端點仍然無法使用,因此任務執行無法進行,甚至可能失敗。

    容錯移轉完成後,儲存體帳戶新主要區域中的儲存體動作資料平面元件會處理後續的工作指派執行。 儲存任務資源仍停留在原始區域,因此當該區域無法使用時,任務定義的報告可能會受到影響。 資源其他部分的報告功能持續運作。

    總中斷時間包括偵測故障、決定是否啟動故障轉移,以及完成儲存帳戶故障轉移的時間。

    若未發生故障轉移,任務執行將不可用,直到原始主要區域恢復。

    管理操作在區域故障時仍可使用。

  • Redistribution:Azure 儲存體 會在故障轉移完成時更新儲存帳戶端點。 後續的工作指派執行會自動對新主要區域中的帳戶執行。 你不需要重新設定儲存任務或指派。

區域復原

容錯回復程序取決於儲存體帳戶的容錯移轉類型。 請依照 Blob 儲存體 區域復原指引,將目標儲存帳戶容錯移轉回原區域。 Azure 儲存體 Actions 在儲存帳號容錯移轉回復後不需要額外設定。

區域故障測試

為了測試你的復原流程,避免因非計畫故障轉移而導致的資料遺失,建議在使用地理冗餘儲存選項的非生產儲存帳戶下建立具代表性的儲存工作指派,然後啟動由客戶管理的計畫性故障轉移。 檢視任何進行中的執行,並確認後續排定的執行會對新主要區域中的帳戶執行。 如需容錯移轉測試指引,請參閱在 Azure Blob 儲存體中測試區域失敗。

客製化多區域韌性解決方案

Azure 儲存體 Actions 內建的區域故障轉移支援僅在目標儲存帳號處於配對區域且使用地理冗餘儲存選項時提供。

如果你的多區域儲存解決方案在每個區域使用獨立的儲存帳號,而不是儲存帳號故障轉移,你可以在每個目標帳號的同一區域部署儲存任務,並為每個帳號建立指派。 你負責在帳戶間複製資料、保持任務定義與指派同步,並控制在正常操作和故障轉移中執行哪些指派。 請確保不同區域中的指派不會對複寫的資料執行衝突的操作。

備份與還原

若要在意外刪除後恢復 Azure 儲存體 Actions 設定,請將儲存任務與指派定義為基礎設施即程式碼(IaC),並將定義存於原始碼控制中。 包含任務條件與操作、排程、目標儲存帳戶範圍、報告容器設定、管理身份及所需角色指派。 你可以使用 Bicep 部署儲存任務,也可以在 Bicep 中定義儲存任務指派。

儲存體工作與指派僅由設定組成,並不包含工作所處理的客戶資料。 使用前述的 IaC 方法來恢復此配置。 你必須分別負責保護和恢復目標儲存帳戶的資料。 有關 Azure 儲存體 資料保護選項的資訊,請參閱資料保護概覽。

在非生產環境測試你的復原程序。 在啟用重建指派之前,先使用條件預覽和模擬跑來驗證任務是否針對目標 blob。 欲了解更多資訊,請參閱 使用儲存任務的最佳實務。

服務維護的韌性

Microsoft 定期執行服務更新及其他維護。 Azure 平台自動處理這些活動,確保維護過程對您來說無縫且透明。 除非您收到透過 Azure 服務健康狀態 計畫維護 的通知,否則維護期間將不會有停機。

服務等級協定

Azure 儲存體 Actions 不提供可用性服務等級協議(SLA)。