本人有一个3节点hadoop, 启动了3个docker容器, 众所周知, docker容器内服务的端口是可以映射到宿主机的端口的, 我采用-P将容器的所有端口映射到主机端口, 命令如下:
docker run -it -v /Users/yc/hadoop/docker:/test -P -h h1 --name h1 sequenceiq/hadoop-docker /etc/bootstrap.sh -bash
这是第master节点的启动脚本, 映射了一个宿主机目录, 映射了所有容器端口到宿主机, 而且设置了容器的hostname
当我查看进程的时候
docker ps
结果如下, 我做了下美化:
b96b897c6532 sequenceiq/hadoop-docker "/etc/bootstrap.sh -b"
24 minutes ago Up 24 minutes
0.0.0.0:32797->2122/tcp,
0.0.0.0:32796->8030/tcp,
0.0.0.0:32795->8031/tcp,
0.0.0.0:32794->8032/tcp,
0.0.0.0:32793->8033/tcp,
0.0.0.0:32792->8040/tcp,
0.0.0.0:32791->8042/tcp,
0.0.0.0:32790->8088/tcp,
0.0.0.0:32789->19888/tcp,
0.0.0.0:32788->49707/tcp,
0.0.0.0:32787->50010/tcp,
0.0.0.0:32786->50020/tcp,
0.0.0.0:32785->50070/tcp,
0.0.0.0:32784->50075/tcp,
0.0.0.0:32783->50090/tcp
h1
我们常用的50070和8088都映射出来了, 但是9000没有, 我知道9000这个协议是hdfs, 可能不属于tcp, 那么如何在我宿主机访问啊
我想用IDEA开发hadoop的java程序, 输入输出目录都得是 hdfs:ip:9000/目录 这种形式的, 不知道如何访问docker容器的该端口啊
缺乏 HDFS ipc 端口是
sequenceiq/hadoop-docker
镜像的一个bug sequenceiq/hadoop-docker#48,虽然已经修复(见: https://github.com/sequenceiq...,但是其维护者一直没有构建新版本的镜像,从而导致你现在使用依然有问题。解决办法很简单,在
docker run
后面的参数上手动加上-p 9000:9000
即可。顺便说一句,虽然 Hadoop 网站有提及
sequenceiq/hadoop-docker
这个 docker 镜像,但是从其Dockerfile
的撰写情况看,其作者对 Docker 理解很肤浅,并没有遵循Docker官方的Dockerfile
最佳实践准则,镜像非常臃肿,制作的并不好。如果有能力应该自己遵循官方最佳实践准则定制自己所需的镜像。