全部產品
Search
文件中心

Dataphin:配置自訂任務參數

更新時間:Jan 25, 2025

本文為您介紹如何配置自訂任務參數,防止系統分配資源時出現不合理的現象。

背景資訊

自訂任務參數用於指定計算引擎的某些參數,避免由於企業的計算引擎特異性導致的引擎適配問題,同時提高了邏輯表任務的效率。

操作步驟

  1. 在Dataphin首頁,單擊頂部功能表列的管理中心

  2. 按照下圖操作指引,進入自訂任務參數頁簽,配置參數。

    image..png

    參數

    描述

    自訂參數生效

    選擇自訂任務參數需要開啟還是關閉

    自訂參數配置

    配置自訂任務參數,參數需要與Dataphin系統綁定的計算引擎源的特性一致,樣本如下。

    set odps.sql.mapper.cpu=100
    set odps.sql.mapper.split.size=256
    set odps.sql.reducer.cpu=100
    set odps.sql.joiner.cpu=100
    說明

    自訂參數配置採用優先順序策略,任務節點的物理化配置較智能引擎的自訂任務參數優先順序高。

  3. 參數配置完後,單擊確定

  4. 在確認對話方塊中,單擊確定,完成自訂任務參數的配置。

    您也可以恢複計算引擎的預設值,在自訂任務參數頁面,單擊恢複預設值。在確認對話方塊中,單擊確定,完成計算引擎的預設值的恢複。