瞭解運算單元

BigQuery 運算單元是 BigQuery 用來執行 SQL 查詢、Python 程式碼或其他工作類型的虛擬運算單元。執行查詢時,BigQuery 會自動判斷查詢使用的運算單元數量。使用的運算單元數量取決於處理的資料量、查詢的複雜程度,以及可用的運算單元數量。一般來說,可用的運算單元越多,就能執行更多並行查詢,複雜查詢的執行速度也會更快。您無法手動變更 BigQuery 用於執行查詢的運算單元數量。

隨選和以運算資源計價

雖然所有查詢都會使用運算單元,但用量計費方式有兩種:以量計價模式或以運算資源計價模式。

根據預設,系統會採用隨選模式向您收費。在這個模式中,系統會依據每項查詢處理的資料量 (以 TiB 為單位) 收費。使用隨選模式的專案,會受到隨選定價的並行運算單元數量上限限制,並具備暫時性高載功能。大多數採用隨選模式的使用者都認為,這個運算單元容量上限已足夠。不過,視工作負載而定,存取更多運算單元可能會提升查詢效能。如要查看帳戶的運算單元用量,請參閱「監控健康狀態、資源使用率和工作」。

如果採用以運算資源為基礎的模式,您必須為查詢分配的運算單元容量付費。這個模式可讓您明確控管總運算單元容量。您可以透過預留項目明確選擇要使用的運算單元數量。您可以將預留項目中的運算單元數量指定為基準數量 (一律分配),或自動調度資源數量 (視需要分配)。具備自動調整資源配置運算單元的預留項目會調整容量,以因應您的工作負載需求。BigQuery 會隨著工作負載變化分配運算單元。您可以根據使用預留項目的工作負載效能或重要性,設定預留項目中的運算單元數量。

避免產生未預期的隨選費用

為避免未指派或新建立的專案預設為按需求計價,請使用Google Cloud 資源階層管理 BigQuery 預留項目,並採取下列做法:

  • 在資料夾或組織層級指派:在資料夾或組織層級建立預留項目指派作業,而非逐一設定專案。這樣一來,該階層中所有現有和未來的專案都會自動沿用預留項目,並使用預留項目的運算單元容量。
  • 考量預設行為:如果沒有明確或繼承的指派項目,BigQuery 會自動套用隨選定價模式。
  • 覆寫例外狀況:如果特定專案必須使用隨選定價,您可以明確將這些專案指派給預留項目「None」(無),覆寫繼承的指派項目。

如要進一步瞭解指派作業優先順序,請參閱「預留項目指派作業」。

使用運算單元來執行查詢

BigQuery 執行查詢工作時,會將 SQL 陳述式轉換為執行計畫,其中包含一系列查詢階段。階段則是由一組執行步驟組成。BigQuery 採用分散式平行架構執行查詢。階段會模擬可平行執行的工作單位。資料會透過分散式重組架構在階段之間傳遞,詳情請參閱這篇 Google Cloud 網誌文章。

BigQuery 查詢執行作業是動態的。查詢計畫可在查詢處理期間修改。新增階段後,工作分配可針對資料分配進行最佳化。此外,隨著其他查詢開始或結束,或自動配置器將運算單元新增至預留項目,查詢執行的容量可能會變更。

BigQuery 可同時執行多個階段、使用推測執行加速查詢,以及動態重新分區階段,以達到最佳平行處理。

運算單元資源經濟

如果查詢要求的運算單元數量超過可用數量,BigQuery 會將個別工作單位排入佇列,並等待運算單元釋出。當查詢作業取得進展及運算單元釋出時,這些佇列中的作業單元會以動態方式開始執行。

BigQuery 可針對查詢的特定階段要求任意數量的運算單元。要求的運算單元數量與您購買的容量無關,而是代表 BigQuery 為該階段選擇的最佳平行處理係數。工作單位會排入佇列,並在運算單元可用時執行。

當查詢需求超過可用運算單元時,您無須支付額外運算單元的費用,也不會產生額外的隨選費率。個別工作單位會排入佇列。

例如,假設使用者要求系統 將文字從英文翻譯成法文

  1. 某個查詢階段要求 2,000 個運算單元,但只有 1,000 個可用。
  2. BigQuery 會耗用所有 1,000 個運算單元,並將其他 1,000 個運算單元排入佇列。
  3. 之後,如果有 100 個運算單元完成工作,它們就會以動態的方式,從佇列中的 1,000 個工作單元裡挑出 100 個工作單元。還有 900 個單位的工作在佇列中。
  4. 之後,如果有 500 個運算單元完成工作,它們就會以動態的方式,從佇列中的 900 個工作單元裡挑出 500 個工作單元。400 個單位。
需求超過可用量時,BigQuery 運算單元會排入佇列。
如果需求超過可用量,BigQuery 運算單元會排入佇列

如果工作負載所需的運算單元數量超過預留項目可用的數量,工作執行階段可能會增加,因為工作會等待運算單元可用。這稱為運算單元爭用。如果工作負載需求遠大於預留項目可用的運算單元,運算單元爭用情形可能會增加。

資源優先順序

當 BigQuery 在特定區域對運算單元資源的需求量很大時,會優先分配容量來管理資源爭用。這項優先順序可確保使用較高層級容量模式的客戶受到的影響較小。系統會按照下列順序優先分配容量:

  1. Enterprise Plus 和 Enterprise 版本的基準和承諾使用資源。
  2. Enterprise Plus 自動調度資源容量。
  3. Enterprise 版自動調度資源。
  4. Standard 版本和隨選容量。

如果某個區域發生資源爭用,Standard 版本和隨選運算能力要求較可能發生存取延遲,因為系統會優先將資源分配給較高階的版本。

BigQuery 中的公平排程

BigQuery 會使用稱為「公平排程」的演算法,在單一預留項目中分配運算單元容量。

BigQuery 排程器會強制在預留項目中執行查詢的專案之間,以及特定專案的工作之間,平均分配運算單元。排程器最終會提供公平性。在短時間內,某些工作可能會分配到不合比例的運算單元,但排程器最終會修正這個問題。排程器的目標是在積極剔除執行中的工作 (導致運算單元時間浪費) 和過於寬鬆 (導致具有長時間執行工作的作業獲得不合比例的運算單元時間) 之間取得平衡。

公平排程可確保每項查詢隨時都能存取所有可用運算單元,並在各項查詢的運算單元需求變更時,動態自動重新分配有效查詢的運算資源。在下列情況下,查詢會完成並提交新查詢以供執行:

  • 每當您提交新的查詢時,系統會自動把運算能力重新分配給所有執行中的查詢。隨著每個查詢可用的運算能力越來越多,個別的工作單元就能順利地、暫停、繼續執行,以及加入佇列。
  • 每當有查詢執行完畢時,系統會立刻自動將該查詢占用的運算能力提供給所有其他的查詢使用。
  • 每當查詢的動態 DAG 發生變化,導致查詢的容量需求改變時,BigQuery 就會自動重新評估這項查詢和所有其他查詢的可用容量,並視需要重新分配及暫停運算單元。
在多項查詢之間公平排定 BigQuery 運算單元。
BigQuery 中的公平排程

視複雜度和大小而定,查詢可能不需要其有權使用的所有運算單元,也可能需要更多運算單元。BigQuery 會動態確保在公平排程的情況下,所有運算單元在任何時間點都能充分使用。

如果重要工作持續需要比排程器提供的運算單元更多,請考慮建立額外的預留項目,並指派所需數量的運算單元給該工作。

以下舉例說明公平排程,假設您有下列預留設定:

  • 預留項目 A,有 1,000 個基準運算單元,未啟用自動調度資源
  • 指派給預留項目的專案 A 和專案 B

情境 1:在專案 A 中,您執行需要大量運算單元的查詢 A (一項並行查詢),並在專案 B 中執行 20 項並行查詢。雖然共有 21 個查詢使用預留項目 A,但運算單元分配方式如下:

  • 專案 A 獲得 500 個運算單元,查詢 A 則以 500 個運算單元執行。
  • 專案 B 獲得 500 個運算單元,由 20 項查詢共用。

情境 2:在專案 A 中,您執行需要 100 個運算單元才能執行的查詢 A (一項並行查詢),並在專案 B 中執行 20 項並行查詢。由於查詢 A 不需要 50% 的預留項目,因此運算單元分配方式如下:

  • 專案 A 獲得 100 個運算單元,查詢 A 則以 100 個運算單元執行。
  • 專案 B 獲得 900 個運算單元,由 20 項查詢共用。

相反地,請考慮下列預留項目設定:

  • 預留項目 B,有 1,000 個基準運算單元,不自動調度資源。
  • 10 項專案,全部指派給預留項目 B。

假設這 10 項專案執行的查詢有足夠的運算單元需求,則每項專案都會獲得總預留運算單元的 1/10 (即 100 個運算單元),無論每項專案執行的查詢數量為何。

運算單元配額和限制

運算單元配額和限制可為 BigQuery 提供保障。不同的定價模式會使用不同的運算單元配額類型,如下所示:

  • 隨選計價模式:您必須遵守隨選計價模式的並行運算單元數量上限,並具備暫時性高載能力。視工作負載而定,存取更多運算單元可提升查詢效能。

  • 依用量計價模式:預留項目配額和限制定義了您在某個位置的所有預留項目中,可分配的運算單元數量上限。如果使用自動調度資源功能,預留項目大小上限的總和不得超過這項限制。您只需支付預留項目和承諾使用合約的費用,不需支付配額費用。如要瞭解如何提高運算單元配額,請參閱「申請提高配額」。

請注意,分配到的運算單元 (會影響配額和計費) 和已使用的運算單元 (代表運算中的運算單元) 有所不同。如要詳細比較兩者,請參閱「瞭解運算單元指標」。

如要查看您使用的運算單元數量,請參閱「BigQuery 監控」。

閒置的運算單元

閒置的運算單元概念僅適用於依運算資源計價模式,不適用於自動調度資源的運算單元。在下列兩種情況下,運算單元會視為「閒置」:

  • 承諾使用合約中未分配給任何預留項目基準的運算單元。
  • 已分配給預留項目基準,但預留項目中的工作並未主動使用的運算單元。

為充分發揮所購運算資源的價值和效率,BigQuery 會自動共用這些閒置的運算單元。根據預設,在任何預留項目中執行的查詢,都可以使用相同管理專案中其他預留項目的閒置的運算單元。

當「擁有」這些運算單元的預留項目需要使用這些運算單元來執行工作時,BigQuery 會立即回收這些運算單元。歸還借用運算單元的作業會在幾毫秒內順利完成,確保擁有預留項目的工作負載不受影響。在這段短暫的交接期間,您可能會在監控圖表中發現,所有預留項目的總運算單元用量短暫超過總容量。這是運算單元搶占和分配程序中的正常現象,您無須為這項臨時的額外用量付費。

舉例來說,假設您有下列預留項目設定:

  • project_a 指派給 reservation_a,後者有 500 個基準運算單元,未啟用自動調度資源功能。
  • project_b 已指派給 reservation_b,後者有 100 個基準運算單元,且未啟用自動調度資源功能。
  • 這兩個預留項目位於相同的區域和管理專案,且沒有其他專案指派給這些預留項目。

您在 project_b 執行 query_b。如果 project_a 中沒有執行任何查詢,則 query_b 可以存取 reservation_a 的 500 個閒置的運算單元。query_b 仍在執行時,最多可能使用 600 個運算單元:100 個基準運算單元加上 500 個閒置的運算單元。

假設 query_b 正在執行,而您在可使用 500 個運算單元的 project_a 中執行 query_a。

  • 由於您為 project_a 預留了 500 個基準運算單元,query_a 會立即啟動並分配到 500 個運算單元。
  • 分配給 query_b 的運算單元數量會快速減少至 100 個基準運算單元。
  • 在 project_b 中執行的其他查詢會共用這 100 個運算單元。如果後續查詢沒有足夠的運算單元可啟動,就會排入佇列,直到執行中的查詢完成且運算單元可用為止。

在這個範例中,如果 project_b 指派給沒有基準運算單元或自動調度資源的預留項目,則 query_b 在 query_a 開始執行後就不會有運算單元。BigQuery 會暫停 query_b,直到有閒置的運算單元可用或查詢逾時為止。project_b 中的其他查詢會排入佇列,直到有閒置的運算單元可用。

控管及限制閒置的運算單元共用

如要防止特定預留項目借用其他預留項目的閒置的運算單元,請將其 ignore_idle_slots 屬性設為 true。請注意,這項設定只會控管借用,不會控管出借。如果預留項目的 ignore_idle_slots 設為 true,就無法再借用運算資源,但仍可將自己的閒置運算單元借給其他需要資源的預留項目。只要 ignore_idle_slots 為 false,預留項目的運算單元數量就可以是 0,且仍可存取未使用的運算單元。

除了 ignore_idle_slots 之外,您還可以使用下列機制,管理及控管工作負載之間的閒置運算單元共用:

閒置的運算單元共用功能有兩項主要限制:

  • 不同版本的預留項目之間無法共用閒置的運算單元。
  • ML_EXTERNAL 類型的指派作業是例外狀況,因為 BigQuery ML 外部模型建立工作使用的運算單元無法先占。如果預留項目同時具有 ML_EXTERNAL 和 QUERY 指派類型,則只有在 ML_EXTERNAL 工作未占用運算單元時,其他查詢工作才能使用這些運算單元。此外,這些工作無法使用其他預留項目的閒置運算單元。

以預留項目為基礎的公平性機制

採用預留項目公平性時,BigQuery 會優先處理並平均分配閒置的運算單元,給同一管理員專案內的所有預留項目,無論每個預留項目中執行工作的專案數量為何。每個預留項目都會在閒置運算單元集區中獲得類似的可用容量,然後其運算單元會公平分配給專案。這項功能僅適用於 Enterprise 或 Enterprise Plus 版本。

下圖顯示未啟用預留公平性時,閒置運算單元的分配方式:

閒置的運算單元會由多項專案共用。

在這張圖表中,閒置的運算單元會平均分配給各項專案。

如果未啟用預留項目公平性,可用的閒置運算單元會平均分配給預留項目中的專案。

下圖顯示啟用預留項目公平性後,閒置運算單元的分配方式:

閒置的運算單元會由所有預留項目共用。

在這張圖表中,閒置的運算單元會平均分配給各個預留項目,而非專案。

啟用以預留項目為基礎的公平性機制後,可用的閒置運算單元會平均分配給各個預留項目。

啟用預留項目公平性後,請查看資源消耗量,管理運算單元可用性和查詢效能。

如果正式環境工作負載有嚴格的時間要求,請避免僅依賴閒置的運算單元,這類工作必須使用基準或自動調度資源的運算單元。建議將閒置的運算單元用於優先順序較低的工作,因為運算單元隨時可能遭到先占。

運算單元自動調度資源

下一節將說明自動調度資源運算單元,以及如何與預留項目搭配使用。

使用自動調度資源預留項目

建立自動調度資源預留項目之前,您不需要購買運算單元承諾使用合約。運算單元承諾使用合約可為持續使用的運算單元提供折扣費率,但自動調度資源預留項目不一定要使用。如要建立自動調度資源預留項目,請為預留項目指派運算單元數量上限 (預留項目大小上限)。如要找出自動調度資源運算單元數量上限,請將預留項目大小上限,減去指派給預留項目的任何選用基準運算單元。

建立自動調度資源預留項目時,請考量下列事項:

  • BigQuery 幾乎會立即調整預留項目,直到達到執行工作所需的運算單元數量,或達到預留項目可用的運算單元數量上限。運算單元一律會自動調度為 50 的倍數。
  • 與基準運算單元不同,BigQuery 不會預先保留自動調度資源運算單元。這項容量會填補基準運算單元和預留項目大小上限之間的差距,並取決於目前的系統可用性。在需求量大的期間,容量限制可能會延遲擴充作業。
  • 系統會根據實際用量向上調整資源配置,並進位至最接近的 50 個運算單元增量。
  • 自動調度資源的運算單元在擴充時,會按照相關版本的運算資源定價計費。系統會依據擴充的運算單元數量計費,而非使用的運算單元數量。即使導致 BigQuery 擴充的工作失敗,仍須支付這筆費用。因此,請勿使用工作資訊結構定義來比對帳單。請改為參閱「使用資訊結構定義監控自動調度資源」。
  • 雖然運算單元數量一律以 50 的倍數調整,但單次調整幅度可能超過 50 個運算單元。舉例來說,如果工作負載需要額外 450 個運算單元,BigQuery 會嘗試一次擴充 450 個運算單元,以滿足容量需求。
  • 當與預留項目相關聯的工作不再需要運算資源時,BigQuery 就會縮減資源。根據預設,運算資源是以秒計費,最短計費時間為一分鐘。您可以在預留項目層級選擇加入 BigQuery 流暢擴充功能,按秒計費,且沒有最短時間限制。

任何自動調度的容量都會保留至少 60 秒。這段 60 秒的時間稱為縮減時間範圍。只要容量達到新高峰,縮減時間範圍就會重設,並將整個容量層級視為新的授權。不過,如果上次增加容量後已過 60 秒以上,且需求較低,系統就會減少容量,而不會重設縮減時間範圍,因此可以連續減少容量,不會有強制延遲。

舉例來說,如果初始工作負載容量擴充至 100 個運算單元,則尖峰用量會保留至少 60 秒。如果在縮減資源期間,工作負載擴充至 200 個運算單元的新高峰,則會開始新的 60 秒縮減資源期間。如果在這段縮減資源期間內沒有新的尖峰,工作負載就會在 60 秒後開始縮減資源。

請參考以下詳細範例:在 12:00:00,初始容量擴充至 100 個運算單元,用量持續一秒。這個尖峰值會從 12:00:00 開始維持至少 60 秒。60 秒過後 (12:01:01),如果新的用量為 50 個運算單元,BigQuery 會縮減至 50 個運算單元。如果 12:01:02 的新用量為 0 個運算單元,BigQuery 會再次立即縮減至 0 個運算單元。縮減時間範圍結束後,BigQuery 可以連續縮減多次,不需新的縮減時間範圍。

BigQuery 流暢擴充

BigQuery 流暢擴充功能會移除標準自動調度資源功能所需的一分鐘最短時間,並每秒調整運算單元容量。這項功能不會改變 50 個運算單元的擴充級距。

為快速因應預留項目需求,BigQuery 流暢擴充功能會影響預留項目之間閒置運算單元的共用分配,在短時間內逐步調整,因此預留項目獲得的閒置運算單元數量,可能會略多或略少於確切的公平分配量。

如需啟用這項功能的操作說明,請參閱「更新預留項目」。

如果預留項目使用代管災難復原功能,則主要和次要區域都必須啟用 BigQuery 流暢擴充功能,才能在容錯移轉後按秒計費。

如要瞭解如何使用自動調度資源功能,請參閱「管理工作負載預留項目」。

使用預留項目搭配基準和自動調度資源運算單元

除了指定預留項目大小上限外,您也可以視需要指定每個預留項目的基準運算單元數量。「基準數量」是指一律會分配給預留項目的運算單元最小數量,而且必定會產生這個數量的運算單元費用。只有在所有基準運算單元 (和閒置的運算單元,如適用) 都用完後,系統才會新增自動調度資源運算單元。您可以將某個預留項目中的閒置基準運算單元,分享給其他需要運算能力的預留項目。

只要 BigQuery 在您提出要求時有可用容量,您每隔幾分鐘就能增加預留項目的基準運算單元數量。如果您最近變更過基準運算單元數量,且基準運算單元數量超過承諾使用運算單元數量,則每小時只能減少一次基準運算單元數量。否則,您可以每隔幾分鐘減少基準運算單元。

基準和自動調度資源運算單元會根據您最近的工作負載提供運算資源。如果您預期工作負載會異常龐大,建議您在活動開始前提高基準運算能力,而不是依賴自動調度資源運算單元。由於基準增加取決於 BigQuery 是否有可用容量,因此提前規劃可讓您更有機會取得所需運算單元。如果提高容量的要求失敗,請等待 15 分鐘後再重試。

如果預留項目沒有基準運算單元,或未設定為從其他預留項目借用閒置的運算單元,BigQuery 就會嘗試擴充。否則,基準運算單元必須充分利用,才能擴充。

預留項目會依據下列順序使用及新增運算單元:

  1. 基準運算單元。
  2. 閒置的運算單元共用功能 (如果已啟用)。預留項目只能共用其他預留項目的閒置基準或承諾運算單元,且這些預留項目必須以相同版本和相同區域建立。
  3. 自動調度運算單元。

在以下範例中,運算單元會從指定的基準量開始調度資源。etl 和 dashboard 預留項目的基準大小分別為 700 和 300 個運算單元。

自動調度資源範例 (無承諾使用合約)。

在本例中,etl 預留項目最多可擴充至 1, 300 個運算單元 (700 個基準運算單元加上 600 個自動調度資源運算單元)。如果 dashboard 預留項目未使用,且沒有任何工作在該預留項目中執行,則 etl 預留項目可以使用 dashboard 預留項目的 300 個運算單元,最多可使用 1,600 個運算單元。

dashboard 預留項目可擴充至 1,100 個運算單元 (300 個基準運算單元加上 800 個自動調度資源運算單元)。如果 etl 預留項目完全閒置,dashboard 預留項目最多可擴充至 1, 800 個運算單元 (300 個基準運算單元加上 800 個自動調度資源運算單元,再加上 etl 預留項目中的 700 個閒置的運算單元)。

如果 etl 預留項目需要超過 700 個基準運算單元 (一律可用),則會嘗試依序使用下列方法新增運算單元:

  1. 700 個基準運算單元。
  2. 與 dashboard 預留項目中的 300 個基準運算單元共用閒置的運算單元。預留項目只會與使用相同版本建立的其他預留項目,共用閒置的基準運算單元。
  3. 擴充 600 個運算單元,達到預留項目大小上限。

使用運算單元承諾使用合約

以下範例說明如何使用容量承諾自動調度資源。

自動調度預留資源,並承諾使用運算資源。

與預留項目基準一樣,運算單元承諾使用合約可讓您分配固定數量的運算單元,供所有預留項目使用。與基準運算單元不同,承諾使用合約在約期內無法縮減。運算單元承諾使用合約為選用,但如果需要長期使用基準運算單元,則可節省費用。運算單元承諾使用合約用於支付預留項目的基準運算單元費用。任何未使用的運算單元容量,都會以閒置的運算單元形式,與其他預留項目共用。運算單元承諾使用合約不適用於自動調度資源運算單元。為確保您能以折扣費率使用承諾的運算單元,請確認承諾的運算單元數量足以涵蓋基準運算單元。

在這個範例中,您必須按照預先定義的費率,支付運算資源承諾使用合約運算單元的費用。自動調度資源功能啟用且預留項目處於向上調度狀態後,系統會根據自動調度資源運算單元數量,按照自動調度資源費率向您收費。自動調度資源費率是根據調度後的運算單元數量計費,而非使用的運算單元數量。

以下範例顯示基準運算單元數量超過承諾運算單元數量時的預留項目。

基準運算單元數量超過承諾使用運算單元數量。

在本例中,兩個預留項目共有 1,000 個基準運算單元,其中 500 個來自 etl 預留項目,500 個來自 dashboard 預留項目。不過,承諾使用合約僅涵蓋 800 個運算單元。在這種情況下,超出的運算單元會按照即付即用 (PAYG) 費率計費。

可用運算單元數量上限

如要計算預留項目可使用的運算單元數量上限,請將基準運算單元、自動調度資源運算單元數量上限,以及以相同版本建立且未涵蓋在基準運算單元中的承諾使用合約運算單元相加。以下範例的設定如下:

自動調度預留資源,並承諾使用運算資源。

  • 承諾每年使用 1,000 個運算單元。這些運算單元會指派為 etl 預留項目和 dashboard 預留項目的基準運算單元。
  • 700 個基準運算單元指派給 etl 預留項目。
  • 300 個基準運算單元指派給 dashboard 預留項目。
  • etl 預留項目的自動調度運算單元為 600 個。
  • dashboard 預留項目的自動調度運算單元為 800。

對於 etl 預留項目,運算單元數量上限等於 etl 基準運算單元 (700) 加上 dashboard 基準運算單元 (300,如果所有運算單元都閒置),再加上自動調度資源運算單元數量上限 (600)。因此,在本例中,etl 預留項目最多可使用 1600 個運算單元。這個數字超過運算資源承諾使用合約中的數量。

在以下範例中,年約承諾使用量超過指派的基準運算單元。

如何計算預留項目的可用運算單元最大數量。

在這個範例中,我們有:

  • 承諾每年使用 1,600 個運算單元。
  • 預留項目大小上限為 1500 (包括 500 個自動調度資源運算單元)。
  • 1,000 個基準運算單元指派給 etl 預留項目。

預留項目可用的運算單元數量上限,等於基準運算單元 (1000) 加上未專用於基準運算單元的任何承諾閒置的運算單元 (1600 個年度運算單元 - 1000 個基準運算單元 = 600),再加上自動調度資源運算單元數量 (500)。因此,這項預留項目的潛在運算單元數量上限為 2100。自動調度資源的運算單元是超出承諾使用量的額外運算單元。

BigQuery 有時會使用可用的 BigQuery 系統容量,以高於運算單元上限的速度處理查詢。在這種情況下,BigQuery 會延遲傳回最終查詢結果,直到標準運算單元容量足以涵蓋用量高峰,確保您不會支付超過上限的費用,同時仍會計算使用的總運算量。

自動調度資源最佳做法

  • 初次使用自動配置器時,請根據過去和預期的效能,將自動調度資源運算單元數量設為有意義的數字。建立預留項目後,請主動監控失敗率、效能和帳單,並視需要調整自動調度資源運算單元數量。

  • 自動配置器在縮減資源前至少會等待 1 分鐘,因此請務必設定自動調度資源運算單元數量上限,在效能和成本之間取得平衡。如果自動調度資源運算單元數量上限過高,且工作可在幾秒內使用所有運算單元完成,您仍須支付整分鐘的運算單元費用。如果將運算單元數量上限降至目前的一半,預留項目就會縮減至較低的數量,工作在該分鐘內就能使用更多 slot_seconds,減少浪費。如要瞭解如何判斷運算單元需求,請參閱「監控工作效能」。如要瞭解如何以其他方式判斷運算單元需求,請參閱「查看版本運算單元建議」。

  • 運算單元用量有時可能會超過基準和調度運算單元的總和。如果運算單元用量超過基準加上擴充運算單元,您不需支付費用。

  • 自動配置器最適合用於繁重、長時間執行的工作負載,例如具有多個並行查詢的工作負載。請避免一次傳送一項查詢,因為每項查詢都會擴充預留項目,且擴充狀態會維持至少 1 分鐘。如果您持續傳送查詢,導致工作負載不間斷,設定基準並購買承諾使用合約,就能以折扣價格獲得穩定的運算資源。

  • BigQuery 自動調度資源功能會受限於可用運算資源。BigQuery 會根據歷來用量,盡可能滿足客戶的容量需求。您可以設定選用的運算單元基準,以便立即使用運算單元。無論是否使用基準,都必須付費。為確保有足夠的容量因應大型、非自然的需求 (例如高流量的節慶),請提前幾週與 BigQuery 團隊聯絡。

  • 基準運算單元一律會產生費用。如果運算資源承諾使用合約到期,您可能需要手動調整預留項目中的基準運算單元數量,以免產生不必要的費用。舉例來說,假設您有 1 年期承諾使用合約,其中包含 100 個運算單元,以及 100 個基準運算單元的預留項目。合約到期,且沒有續約方案。合約到期後,您將按照即付即用費率支付 100 個基準運算單元的費用。

觀測能力

如要瞭解如何透過自動調度資源功能監控運算單元用量和工作效能,請參閱「監控自動調度資源」。