Dataphin：附錄：資料探查典型情境說明

計算引擎

類別

異常原因

解決方案

Cloudera Data Platform 7.x

任務報錯

引擎的最佳化器功能異常。

set hive.optimize.shared.work = false;

亞信DP5.3

記憶體溢出

Map端和Reduce端的記憶體溢出。

set mapreduce.map.memory.mb=10150;

set mapreduce.map.java.opts=-Xmx6144m;

set mapreduce.reduce.memory.mb=10150;

set mapreduce.reduce.java.opts=-Xmx8120m;

E-MapReduce3.x、E-MapReduce5.x 、CDH5.x、CDH6.x、FusionInsight 8.x、Cloudera Data Platform 7.x、亞信DP5.3

運行速度慢

設定的Job並發執行數量不足。

set hive.exec.parallel=true;

set hive.exec.parallel.thread.number=16;