すべてのプロダクト
Search

このプロダクト

    E-MapReduce:HDFS の Web UI

    ドキュメントセンター

    E-MapReduce:HDFS の Web UI

    最終更新日:Jan 11, 2025

    このトピックでは、Hadoop Distributed File System（HDFS）の Web UI にアクセスする方法について説明します。また、HDFS の NameNode コンポーネントのエンドポイント、UI ホームページ、および起動の進捗状況についても説明します。

    HDFS の Web UI へのアクセス

    SSH トンネルを使用するか、E-MapReduce（EMR）コンソールで HDFS の Web UI にアクセスできます。詳細については、「オープンソースコンポーネントの Web UI にアクセスするための SSH トンネルの作成」および「オープンソースコンポーネントの Web UI へのアクセス」をご参照ください。

    NameNode のエンドポイント

    バージョン

    エンドポイント

    説明

    Hadoop 3.X

    http://${namenode_hostname}:9870

    ${namenode_hostname} は、NameNode がデプロイされているノードのホスト名に置き換えます。

    Hadoop 2.X

    http://${namenode_hostname}:50070

    ${namenode_hostname} は、NameNode がデプロイされているノードのホスト名に置き換えます。

    NameNode UI ホームページ

    概要

    Overview

    概要 ページの最初の行で、概要 の右側の値は、NameNode がデプロイされているノードのホスト名を示します。括弧（）で囲まれた active または standby の値は、高可用性（HA）クラスターで NameNode がアクティブ状態かスタンバイ状態かを指定します。次の表にパラメーターを示します。

    パラメーター

    説明

    名前空間

    NameNode が属する名前空間のアドレス。

    NameNode ID

    NameNode のサービス ID。

    開始日時

    NameNode の開始時刻。

    バージョン

    HDFS のバージョン番号。

    コンパイル

    コンパイル情報。

    クラスター ID

    HDFS クラスターの ID。

    ブロックプール ID

    HDFS ブロックプールの ID。

    サマリー

    Summary

    前の図の主要情報の説明：

    • セキュリティ：クラスターで Kerberos セキュリティ認証が有効になっているかどうかを示します。

    • セーフモード：クラスターがセーフモードで読み取り専用になっているかどうかを示します。

    • ファイル、ディレクトリ、およびデータブロックの数は、NameNode のステータスによって異なります。これは通常のシナリオです。この場合、アクティブな NameNode によって提供されるデータが優先されます。

    NameNode Journal のステータス

    HA クラスターの場合、次の項目に注意する必要があります。

    • アクティブな NameNode は書き込みモードです。Active NameNode为写模式

      アクティブな NameNode の Quorum Journal Manager（QJM）ステータスを表示する場合は、各 JournalNode の Written txid の ID を確認する必要があります。ID が常に 0 であるか、値が他の JournalNode の値と大きく異なる場合は、JournalNode をリセットします。

    • スタンバイ NameNode は読み取りモードです。Standby NameNode为读模式

      スタンバイ NameNode の QJM ステータスは読み取りモードです。ほとんどの場合、ステータス情報に注意する必要はありません。

    NameNode ストレージ

    NameNode Storage

    NameNode の FsImage ファイルのチェックポイント操作は非同期で実行されます。イメージタイプのステータスに注意する必要があります。たとえば、スタンバイ NameNode のイメージタイプが長時間 Failed 状態の場合、EditLog ファイルが過剰に蓄積されます。NameNode が再起動されると、EditLog ファイルの読み取りに時間がかかります。

    NameNode の起動の進捗状況

    NameNode UI启动

    NameNode の起動中は、FsImage ファイルのロード、EditLog ファイルのロード、および報告されたブロックの待機の操作が実行されます。ほとんどの場合、操作は短時間で完了します。操作の完了に時間がかかる場合は、最適化対策を講じることができます。

    • FsImage ファイルのロードと報告されたブロックの待機に時間がかかる場合は、ガベージコレクション（GC）パラメーターを調整するかどうかを確認できます。

    • EditLog ファイルのロードに時間がかかる場合は、JournalNode に多数のログが蓄積されているかどうかを確認できます。JournalNode が使用するディレクトリについては、「HDFS コンポーネントによって使用されるローカルディスクディレクトリ」をご参照ください。

    参照

    HDFS の使用に関連する問題については、「FAQ とトラブルシューティング」をご参照ください。