☰

Não é possível conectar-se ao HDFS no modo pseudodistribuído

tag-icon • tag-icon linux hadoop hdfs hbase
Não é possível conectar-se ao HDFS no modo pseudodistribuído

Eu segui as instruçõesaquipara instalar o hadoop no modo pseudo-distribuído.

No entanto, estou tendo problemas para me conectar ao HDFS.

Quando executo este comando:

./hadoop fs -ls /

Recebo uma lista de diretórios como deveria.

No entanto, quando executo este comando:

./hadoop fs -ls hdfs://localhost/

Eu entendi isso :

12/08/23 15:29:58 INFO ipc.Client: Retrying connect to server: localhost/127.0.0.1:8020. Already tried 0 time(s).
12/08/23 15:29:59 INFO ipc.Client: Retrying connect to server: localhost/127.0.0.1:8020. Already tried 1 time(s).
12/08/23 15:30:00 INFO ipc.Client: Retrying connect to server: localhost/127.0.0.1:8020. Already tried 2 time(s).
12/08/23 15:30:01 INFO ipc.Client: Retrying connect to server: localhost/127.0.0.1:8020. Already tried 3 time(s).
12/08/23 15:30:02 INFO ipc.Client: Retrying connect to server: localhost/127.0.0.1:8020. Already tried 4 time(s).
12/08/23 15:30:03 INFO ipc.Client: Retrying connect to server: localhost/127.0.0.1:8020. Already tried 5 time(s).
12/08/23 15:30:04 INFO ipc.Client: Retrying connect to server: localhost/127.0.0.1:8020. Already tried 6 time(s).
12/08/23 15:30:05 INFO ipc.Client: Retrying connect to server: localhost/127.0.0.1:8020. Already tried 7 time(s).
12/08/23 15:30:06 INFO ipc.Client: Retrying connect to server: localhost/127.0.0.1:8020. Already tried 8 time(s).
12/08/23 15:30:07 INFO ipc.Client: Retrying connect to server: localhost/127.0.0.1:8020. Already tried 9 time(s).
ls: Call to localhost/127.0.0.1:8020 failed on connection exception: java.net.ConnectException: Connection refused

Se eu navegar aqui:

http://localhost:50070/dfshealth.jsp

Recebo a página de integridade do sistema NameNode, como deveria. No entanto, se eu seguir o link que diz "Navegar no sistema de arquivos", acredito que esteja aqui:

http://localhost:50070/nn_browsedfscontent.jsp

Recebo uma página 404 do Jetty.

Não sei se as duas coisas estão relacionadas, mas isso definitivamente está me bloqueando. Estou tentando configurar o hbase no modo pseudo-distribuído conforme descritoaqui, mas não consigo porque o hbase não consegue se conectar ao hdfs na porta 8020.

INFORMAÇÕES

Estou executando o hadoop .20 e o hbase .90.6 no CENTOS 6.2.

Hadoop e hbase iniciam na inicialização, a partir de scripts init.d que escrevi.

O Hadoop está sendo executado sob o usuário hadoop e está localizado em /opt/hadoop. No script hadoop init.d, executo start-all.sh usando o comando daemon.

O HBase está sendo executado na raiz e está localizado em /opt/hbase. No script hbase init.d, executo o script start-hbase.sh. Atualmente estou executando o HBase em modo autônomo.

Responder1

Parece que eu configurei fs.default.name por engano para 9000. Mudei para 8020, agora tudo funciona bem. Obrigado a mgorven pela ajuda!

informação relacionada