解决方案-hadoop组件，外网部署客户端-JobPlus

需要开通的端口

hdfs客户端

配置客户端用hostname方式访问集群

<name>dfs.client.use.datanode.hostname</name>

</property>

关于向yarn提交job的问题

1.application一直保持accepted状态，tarck ui是undefined状态

问题分析

查看yarn的application_xxx日志，发现datanode节点同外网客户端访问yarn的方式一样（用外网ip访问），所以可以肯定外网ip是从当前客户端机器获取的，尝试把yarn-site.xml里ResourceManager的ip都更新为hostname。

解决方案

yarn.resourcemanager.hostname，yarn.resourcemanager.address
把yarn-site.xml里的ResourceManager的ip都更新为hostname。

需要开通的端口<img src="https://file.jobplus.com.cn/2018/07/20/d69005d5dc2944daa7e169b94bdb3f60.png" _src="https://file.jobplus.com.cn/2018/07/20/d69005d5dc2944daa7e169b94bdb3f60.png" style=""/><img src="https://file.jobplus.com.cn/2018/07/20/c9b7449aac3c427bae771f83c9495a59.png" _src="https://file.jobplus.com.cn/2018/07/20/c9b7449aac3c427bae771f83c9495a59.png" style=""/>hdfs客户端配置客户端用hostname方式访问集群<property>    <name>dfs.client.use.datanode.hostname</name>    <value>true</value> </property><ul><li> </li></ul>关于向yarn提交job的问题<h3>1.application一直保持accepted状态，tarck ui是undefined状态</h3>问题分析查看yarn的application_xxx日志，发现datanode节点同外网客户端访问yarn的方式一样（用外网ip访问），所以可以肯定外网ip是从当前客户端机器获取的，尝试把yarn-site.xml里ResourceManager的ip都更新为hostname。解决方案yarn.resourcemanager.hostname，yarn.resourcemanager.address  把yarn-site.xml里的ResourceManager的ip都更新为hostname。<img src="https://file.jobplus.com.cn/2018/07/20/e3a0b41749eb46739a9c1ce021767caf.png" _src="https://file.jobplus.com.cn/2018/07/20/e3a0b41749eb46739a9c1ce021767caf.png" style=""/><img src="https://file.jobplus.com.cn/2018/07/20/0989ba05836f4c629515f2ef4ba844da.png" _src="https://file.jobplus.com.cn/2018/07/20/0989ba05836f4c629515f2ef4ba844da.png" style=""/>