Este tópico lista as portas padrão dos componentes de código aberto no E-MapReduce (EMR). Use esta referência ao configurar grupos de segurança, regras de firewall ou túneis SSH para acessar as interfaces web e os serviços dos componentes.
Hadoop 2.x
|
Porta |
Serviço |
Protocolo |
Descrição |
Acesso externo |
Parâmetro de configuração |
|
50070 |
Interface web do NameNode do HDFS |
HTTP |
Monitora o status do HDFS e permite navegar pelo sistema de arquivos. |
Sim |
|
|
50075 |
Interface web do DataNode |
HTTP |
Interface web do DataNode. |
Sim |
— |
|
50010 |
Transferência de dados do DataNode |
TCP |
Transfere dados de e para o DataNode. |
Não (interno do cluster) |
— |
|
50020 |
Comunicação entre processos (IPC) do DataNode |
IPC |
Gerencia a comunicação IPC entre o NameNode e o DataNode. |
Não (interno do cluster) |
— |
|
8020 |
RPC do HDFS (cluster HA) |
IPC |
Porta de chamada de procedimento remoto (RPC) para o HDFS em um cluster de alta disponibilidade (HA). |
Não (interno do cluster) |
— |
|
9000 |
RPC do HDFS (cluster não HA) |
IPC |
Porta RPC para o HDFS em um cluster sem alta disponibilidade. |
Não (interno do cluster) |
|
|
8025 |
Rastreador de recursos do ResourceManager |
IPC |
Gerencia o rastreamento de recursos entre os NodeManagers e o ResourceManager. |
Não (interno do cluster) |
|
|
8088 |
Interface web do ResourceManager do YARN |
HTTP |
Monitora os recursos do cluster YARN e o status dos jobs. |
Sim |
— |
|
8485 |
RPC do JournalNode |
IPC |
Porta RPC para o JournalNode, usada na sincronização de logs de edição em ambientes HDFS HA. |
Não (interno do cluster) |
— |
|
8019 |
ZKFailoverController (ZKFC) |
IPC |
Usada pelo ZKFailoverController para coordenar o failover em alta disponibilidade. |
Não (interno do cluster) |
— |
|
19888 |
Interface web do JobHistory Server |
HTTP |
Exibe o histórico de jobs MapReduce concluídos. |
Sim |
|
|
10020 |
RPC do JobHistory Server |
IPC |
Porta RPC do JobHistory Server. |
Não (interno do cluster) |
|
Hadoop 3.x
|
Porta |
Serviço |
Protocolo |
Descrição |
Acesso externo |
Parâmetro de configuração |
|
8020 |
RPC do NameNode |
IPC |
Porta RPC do NameNode. |
Não (interno do cluster) |
|
|
9870 |
Interface web do NameNode (HTTP) |
HTTP |
Monitora o status do HDFS e permite navegar pelo sistema de arquivos. |
Sim |
— |
|
9871 |
Interface web do NameNode (HTTPS) |
HTTPS |
Interface web segura do NameNode. |
Sim |
— |
|
9866 |
Transferência de dados do DataNode |
TCP |
Transfere dados de e para o DataNode. |
Não (interno do cluster) |
— |
|
9864 |
Interface web do DataNode (HTTP) |
HTTP |
Interface web do DataNode. |
Sim |
— |
|
9865 |
Interface web do DataNode (HTTPS) |
HTTPS |
Interface web segura do DataNode. |
Sim |
— |
|
8088 |
Interface web do ResourceManager |
HTTP |
Monitora os recursos do cluster YARN e o status dos jobs. |
Sim |
|
O Hadoop 3.x alterou várias portas padrão do HDFS em relação à versão 2.x. Em especial, a interface web do NameNode passou da porta 50070 (HTTP) para a 9870, e a interface web do DataNode mudou de 50075 para 9864.
MapReduce
|
Porta |
Serviço |
Protocolo |
Descrição |
Acesso externo |
Parâmetro de configuração |
|
8021 |
JobTracker |
IPC |
Aceita submissões de jobs no MapReduce v1. |
Não (interno do cluster) |
|
ZooKeeper
|
Porta |
Serviço |
Protocolo |
Descrição |
Acesso externo |
|
2181 |
Porta do cliente |
TCP |
Os clientes se conectam ao ZooKeeper por esta porta. |
Sim (acesso do cliente) |
|
2888 |
Comunicação do líder |
TCP |
O líder do ZooKeeper escuta nesta porta para se comunicar com os seguidores. |
Não (interno do cluster) |
|
3888 |
Eleição de líder |
TCP |
Usada pelos nós do ZooKeeper para eleger um líder. |
Não (interno do cluster) |
HBase
|
Porta |
Serviço |
Protocolo |
Descrição |
Acesso externo |
Parâmetro de configuração |
|
16010 |
Interface web do HMaster |
HTTP |
Interface web do nó mestre do HBase. |
Sim |
|
|
16000 |
RPC do HMaster |
IPC |
Porta RPC do HMaster. |
Não (interno do cluster) |
|
|
16030 |
Interface web do RegionServer |
HTTP |
Interface web para gerenciar o RegionServer do HBase. |
Sim |
|
|
16020 |
RPC do HRegionServer |
IPC |
Porta RPC do HRegionServer. |
Não (interno do cluster) |
|
|
9099 |
Thrift Server |
TCP |
Porta do Thrift Server do HBase. |
Sim |
— |
Hive
|
Porta |
Serviço |
Protocolo |
Descrição |
Acesso externo |
|
9083 |
MetaStore |
TCP |
Porta de escuta padrão do serviço Hive MetaStore. |
Não (interno do cluster) |
|
10000 |
JDBC do HiveServer2 |
TCP |
Porta Java Database Connectivity (JDBC) do HiveServer2. |
Sim (acesso do cliente) |
|
10001 |
JDBC do Spark Thrift Server |
TCP |
Porta JDBC do Spark Thrift Server. |
Sim (acesso do cliente) |
Spark
|
Porta |
Serviço |
Protocolo |
Descrição |
Acesso externo |
|
7077 |
Comunicação do Master |
TCP |
O master do Spark escuta nesta porta para receber conexões de nós workers e submissões de jobs em clusters standalone. |
Não (interno do cluster) |
|
8080 |
Interface web do Master |
HTTP |
Interface web do nó master do Spark, usada para monitorar o agendamento de recursos. |
Sim |
|
8081 |
Interface web do Worker |
HTTP |
Interface web dos nós workers do Spark, usada para monitorar o agendamento de recursos. |
Sim |
|
4040 |
Interface web do Driver |
HTTP |
Interface web do Spark Driver, usada para monitorar o agendamento de tarefas. |
Sim |
|
18080 |
Interface web do Spark History Server |
HTTP |
Interface web para consultar o histórico de aplicações Spark concluídas. |
Sim |
Kafka
|
Porta |
Serviço |
Protocolo |
Descrição |
Acesso externo |
|
9092 |
RPC do Broker |
TCP |
Porta RPC para comunicação entre nós dentro de um cluster Kafka. |
Sim (acesso do cliente) |
Redis
|
Porta |
Serviço |
Protocolo |
Descrição |
Acesso externo |
|
6379 |
Redis |
TCP |
Porta padrão do serviço Redis. |
Sim (acesso do cliente) |
Hue
|
Porta |
Serviço |
Protocolo |
Descrição |
Acesso externo |
|
8888 |
Interface web do Hue |
HTTP |
Interface web do Hue. |
Sim |
Oozie
|
Porta |
Serviço |
Protocolo |
Descrição |
Acesso externo |
|
11000 |
Interface web do Oozie |
HTTP |
Interface web do Oozie. |
Sim |
Druid
|
Porta |
Serviço |
Protocolo |
Descrição |
Acesso externo |
Parâmetro de configuração |
|
18888 |
Interface web do Druid |
HTTP |
Interface web do Druid. |
Sim |
— |
|
18090 |
Overlord |
HTTP |
Recebe e distribui tarefas de indexação. |
Não (interno do cluster) |
|
|
18091 |
MiddleManager |
HTTP |
Executa tarefas de indexação como processos separados. |
Não (interno do cluster) |
|
|
18081 |
Coordinator |
HTTP |
Gerencia a disponibilidade de dados nos nós Historical. |
Não (interno do cluster) |
|
|
18083 |
Historical |
HTTP |
Armazena e serve dados históricos de segmentos. |
Não (interno do cluster) |
|
|
18082 |
Broker |
HTTP |
Encaminha consultas para os nós de dados apropriados. |
Não (interno do cluster) |
|
Ganglia
|
Porta |
Serviço |
Protocolo |
Descrição |
Acesso externo |
|
9292 |
Interface web do Ganglia |
HTTP |
Interface web para monitoramento de clusters com Ganglia. |
Sim |
Ranger
|
Porta |
Serviço |
Protocolo |
Descrição |
Acesso externo |
|
6080 |
Interface web do Ranger |
HTTP |
Interface web para administrar políticas do Apache Ranger. |
Sim |
Kafka Manager
|
Porta |
Serviço |
Protocolo |
Descrição |
Acesso externo |
|
8085 |
Kafka Manager |
HTTP |
Interface web para gerenciar clusters Kafka. |
Sim |
Superset
|
Porta |
Serviço |
Protocolo |
Descrição |
Acesso externo |
|
18088 |
Interface web do Superset |
HTTP |
Interface web do Apache Superset. |
Sim |
Impala
|
Porta |
Serviço |
Protocolo |
Descrição |
Acesso externo |
|
21050 |
JDBC do Impala |
TCP |
Porta JDBC para conexão com o Impala. |
Sim (acesso do cliente) |
Presto
|
Porta |
Serviço |
Protocolo |
Descrição |
Acesso externo |
|
9090 |
Interface web do Presto |
HTTP |
Interface web do Presto. |
Sim |