E-MapReduce：管理節點群組

使用限制

• 本文操作僅適用於資料湖（DataLake）、即時資料流（DataFlow）、資料分析（OLAP）、資料服務（DataServing）和自訂叢集（Custom）情境的叢集。

• 付費類型為隨用隨付或搶佔式執行個體的Task節點群組不支援配置升級操作。

  配置升級的具體操作，請參見升級節點配置。

新增節點群組

1. 進入節點管理頁面。

   1. 登入E-MapReduce控制台。

   2. 在頂部功能表列處，根據實際情況選擇地區和資源群組。

   3. 單擊目的地組群操作列的節點管理。

2. 在節點管理頁面，單擊新增節點群組。

3. 在新增節點群組面板中，配置以下資訊。

   參數	描述
   可用性區域	預設展示叢集當前所使用的可用性區域，單擊查看全部可用性區域可選擇該地區的其他可用性區域。 在選擇其他可用性區域時，僅支援新增Task類型的節點群組。 新增跨可用性區域的節點群組後，建議啟用YARN Node Label功能，將叢集劃分為不同分區，從而降低因網路傳輸（尤其是Shuffle過程）引起的頻寬不確定性對任務效率的影響，詳情請參見使用Node Labels節點分區。
   節點群組類型	支援新增以下四種類型的節點群組： Core：核心類型節點群組。適用於資料量較小的情境，如日誌分析、網站流量統計等。 Task：計算類型節點群組。適用於需要臨時增加計算資源的情境，如批處理任務、資料清洗等。 Gateway：任務類型節點群組（僅EMR-5.10.1及以上版本的DataLake、DataFlow叢集支援）。適用於需要頻繁提交任務的情境，如資料科學家進行模型訓練、資料工程師進行資料處理等。 Master-Extend：負載向外延展群組（僅EMR-3.51.1及以上版本，EMR-5.17.1及以上版本的高可用叢集支援）。 當叢集Master節點負載較高時，您可以通過新增Master-Extend節點群組將服務分散部署在不同的節點群組上，來分擔Master節點的壓力。適用於叢集規模較大、Master節點負載較高的情境。 說明 新增服務後，預設不會部署至Master-Extend節點群組。如果您有部署訴求，可以在新增Master-Extend節點群組時，按需勾選部署服務。
   付費類型	當前節點群組的付費類型。支援的付費類型有隨用隨付、搶佔式執行個體和訂用帳戶。 說明 僅Task節點群組支援搶佔式執行個體。
   節點群組名稱	節點群組名稱不允許重複。
   部署服務	僅Master-Extend節點群組類型支援自訂部署服務。 支援以下自訂部署的服務： Hive：HiveMetaStore、HiveServer Kyuubi：KyuubiServer Spark：SparkHistoryServer、SparkThriftServer
   掛載公網	可以選擇是否為節點群組開啟公網。開啟後，節點群組內所有節點會掛載公網。
   交換器	可以在建立節點群組的時候設定交換器（同一VPC內）。節點群組建立好後不可更改。 說明 不支援設定非叢集所在可用性區域的VPC下的交換器。
   附加安全性群組	（可選）您可以為節點群組關聯更多安全性群組。 您最多可以為該節點群組關聯4個附加安全性群組。
   執行個體類型	根據您的實際情況選擇執行個體。 如果付費類型為訂用帳戶，則只能選擇一個類型。 如果付費類型為隨用隨付或搶佔式執行個體，且節點群組類型為Task，則最多可以選擇10個同vCPU和記憶體的執行個體作為備選。
   儲存配置	系統硬碟：根據需要選擇ESSD雲端硬碟或者高效雲端硬碟。系統硬碟取值範圍為60 ~ 500 GiB。推薦至少120 GiB。 資料盤：根據需要選擇ESSD雲端硬碟或者高效雲端硬碟。資料盤取值範圍為40 ~ 32768 GiB。推薦至少80 GiB。 說明 當您選擇ESSD雲端硬碟時，可以根據所選雲端硬碟的容量大小來設定不同的效能層級（PL層級），以滿足不同的叢集效能需求。預設的效能層級為PL1。根據云盤的容量範圍，系統硬碟支援PL0、PL1和PL2三個效能層級的雲端硬碟規格，資料盤支援PL0、PL1、PL2和PL3四個效能層級的雲端硬碟規格。雲端硬碟的詳細資料，請參見雲端硬碟概述。
   資源預定策略	說明 僅節點群組類型選擇為TASK（任務執行個體組）且付費類型為隨用隨付時，支援配置該參數。 資源預定策略支援關聯您的ECS私人池，您可以前往ECS控制台進行資源預定。更多資訊，請參見資源管家概述。 僅公有池（預設）：直接使用公用資源集區中的資源。 私人池優先：如果您已經在ECS控制台上建立了自己的私人池，並希望使用這些預分配給特定專案或團隊的資源，則可以選擇此選項。在這種情況下，系統會先嘗試從您指定的私人池中擷取ECS執行個體；如果私人池內沒有足夠的可用資源，則會自動轉向公用資源集區以完成請求。 指定私人池：指定一個具體的ECS私人池用於當前的EMR叢集。
   自動補償	說明 僅節點群組類型選擇為TASK(任務執行個體組)時，支援配置該參數。 開啟自動補償功能後，EMR會自動監測當前節點群組內節點運行狀態。當發現異常時，EMR會自動釋放異常節點，並擴容相同數量的節點。更多資訊，請參見節點補償。
   擴縮容策略	說明 僅付費類型選擇為搶佔式執行個體時，支援配置該參數。 優先順序策略（預設） 每個節點建立時，從第一個規格開始嘗試購買，直到建立成功。最終購買的執行個體規格可能隨庫存變化而不同。 成本最佳化策略 擴容時Auto Scaling按vCPU單價從低到高嘗試建立ECS執行個體，縮容時按vCPU單價從高到低嘗試移除ECS執行個體。如果伸縮配置中計費方式選擇搶佔式執行個體，則優先建立搶佔式執行個體。由於庫存等原因無法建立各執行個體規格的搶佔式執行個體時，再自動嘗試建立隨用隨付執行個體。 更多資訊，請參見成本最佳化模式。
   優雅下線	說明 僅部署了YARN服務的叢集，支援配置該參數。 開啟優雅下線後，節點群組縮容時會等待節點任務完成或超過設定的逾時時間後，再縮容節點。您可以在YARN服務頁面配置參數yarn.resourcemanager.nodemanager-graceful-decommission-timeout-secs，以修改優雅下線逾時時間。
   加入部署集	說明 當節點群組類型為CORE、Gateway或Master-Extend時，支援配置該參數。 預設關閉。開啟部署集開關後，ECS執行個體將會分散部署在不同的物理伺服器上，以此確保業務的高可用性及底層的容災能力。更多資訊，請參見開啟部署集。
   软件自定义配置	預設關閉。開啟軟體自訂配置開關後，您可以添加JSON格式的設定檔，在節點群組建立過程中添加服務的節點群組層級參數。更多資訊，請參見配置自訂軟體。

4. 單擊確定。

   添加完成後，即可在節點管理頁面查看到新增的節點群組。

修改節點群組

1. 在節點管理頁面，單擊目標節點群組所在行的節點群組名稱。

2. 在彈出的節點群組屬性對話方塊中，修改節點群組資訊，單擊儲存。

   • 對於Master、Core、Gateway和Master-Extend類型的節點群組，您可以修改節點名稱和附加安全性群組。

   • 對於Task類型的安全性群組，您可以修改節點名稱、節點規格以及附加安全性群組等資訊，還可以調整進階資訊地區中的相關資訊。

刪除節點群組

1. 在節點管理頁面，單擊目標節點群組操作列的刪除節點群組。

2. 在彈出的對話方塊中，單擊刪除。

成本最佳化模式

該模式下，您可以制定更詳細的成本控制策略，在成本和穩定性之間進行調整和權衡。

當您不指定組內最小按量節點數量、按量節點所佔比例和最低價的多個執行個體規格參數時，您建立的是普通成本最佳化伸縮組。否則，您建立的是成本最佳化混合執行個體伸縮組。成本最佳化混合執行個體伸縮組與普通成本最佳化伸縮組在介面和功能方面是完全相容的。

相關文檔

• 如果需要給節點群組擴容，詳情請參見擴容叢集。

• 如果需要給節點群組縮容，詳情請參見縮容叢集。

• 如果需要給磁碟擴容，詳情請參見擴容磁碟。

• 如果需要配置Auto Scaling規則，詳情請參見建立自訂Auto Scaling策略。

• 如果需要查看Auto Scaling記錄，詳情請參見查看Auto Scaling活動。