昨天hadoop集群中一个数据节点到期，导致关机，续费开机后，hadoop进程正常开启，但今天早上看到MR运算结果为空，查看运算日志和zabbix监控获取如下报错日志和监控画面：

[crayon-557f1ca55c083244179393/]

        从监控画面可以看出，MR job从第一个开始就卡死了。然后，根据日志信息排查，最后确定主要是由于Hadoop集群内某些节点的防火墙没有关闭，导致无法访问集群内节点。关机重启后的datanode  119.*.*.* ,开机自动启动了iptables,关闭iptables后，再次运行MR，成功。

Related Posts

• Hadoop新增datanode与SecondaryNameNode(1)
• Hadoop 从SecondaryNamenode 恢复NameNode(0)
• zabbix agent一键安装脚本(0)
• Hadoop集群中banlancer用法简介(1)
• zabbix监控Hadoop的实现(13)
• 安装php时的libmysqlclient.so.18错误Error 127解决办法(0)
• 升级wordpress至3.4版报错及解决方案(2)
• LFS再体验(1)

Recent Comments