本ページでは、リリース日と更新を含む、リリースされた E-MapReduce 3.23.0 バージョンの概要を説明します。

リリース日

2019 年 9 月 18 日

更新情報

コンポーネント 更新内容
Druid
  • Druid をバージョン 0.15.1 にアップグレード。
  • ルーターコンポーネントを追加。
  • Fastjson をバージョン 1.2.60 にアップグレード。
Spark
  • Spark SQL Thrift サーバーのコードを更新して、IsolatedClassLoader が特定の場合にクラスをロードできない問題を修正。
  • 安定性を向上させるために Spark トランザクションに関連するコードをリファクタリング。
  • 組み込み Hive がバージョン 2.3 にアップグレードされた後、最適化された行カラムナー（ORC）ファイルを読み書きできない問題を修正。
  • MERGE INTO 構文に対応。
  • SCAN および STREAM 構文に対応。
  • 構造化ストリーミング Kafka シンクの 1 回限りのセマンティクス（EOS） に対応。
  • Delta をバージョン 0.4.0 にアップグレード。
Kudu Kudu の構成時にホスト名が必要になる問題を修正。
Hive
  • 以前のバージョンの Hive で構成されていた Hive フックを削除。
  • データ最適化で hive.groupby.skew への複数の COUNT (DISTINCT) の使用に対応。
  • 異なるバージョンのバケットを結合するときのデータ損失の問題を修正。
Flink Flink をバージョン 1.8.2 にアップグレード。
Bigboot
  • HDFS FsImage 分析ツールをアップグレード。
  • OSS (Object Storage Service)の JAR パッケージを更新して、メインスレッドの終了後に非デーモンスレッドが存続する問題を修正。
Kafka
  • Kafka の DepolymentSet-Aware レプリケーション配布戦略に対応。
  • Fastjson 依存関係を削除。
HDFS
  • SmartData OSS の JAR パッケージの展開ロジックを最適化。
  • SmartData OSS の JAR パッケージを更新。
Flume Fastjson をバージョン 1.2.60 にアップグレード。
Tensorflow on Spark これは新しいコンポーネントです。
Has Fastjson をバージョン 1.2.60 にアップグレード。
Livy Fastjson をバージョン 1.2.60 にアップグレード。