當通過MaxCompute Spark 訪問公網網域名稱時,預設情況下,MaxCompute與目標服務之間的網路不可達。本文以訪問google.com:443為例,介紹訪問公網網域名稱兩種方式。
Smartnat方式
-
設定Project公網白名單,參考訪問公網方案。
-
在
spark-defaults.conf或DataWorks配置中添加以下配置項:# 設定smartnat為true spark.hadoop.odps.cupid.smartnat.enable=true # 添加公網訪問白名單 spark.hadoop.odps.cupid.internet.access.list=google.com:443
專線直連方式
-
開通專線直連,參考訪問VPC方案(專線直連),需要保證VPC具備訪問公網能力
-
在
spark-defaults.conf或DataWorks配置中添加以下配置項:# 添加專線直連參數 spark.hadoop.odps.cupid.eni.enable=true spark.hadoop.odps.cupid.eni.info=regionid:vpc-********** # 添加公網訪問白名單 spark.hadoop.odps.cupid.internet.access.list=google.com:443