一、跑数时间延长，之前为3小时20分钟左右，出现问题后，跑数时间大约为6小时左右
二、查看集群问题：
三、分析过程：
1、根据错误，初步估计为metastore server 服务器出现问题；
2、查看日志：
3、查看数据库：
4、分析为DNS反向代理解析太多，导致不断进行解析
mysql日志显示[Warning] IP address 'xxxx' could not be resolved: Name or service not known，那是因为mysql默认会反向解析DNS，对于访问者Mysql不会判断是hosts还是ip都会进行dns反向解析，频繁地查询数据库和权限检查，这大大增加了数据库的压力，导致数据库连接缓慢，严重的时候甚至死机，出现“连接数据库时出错”等字样。
解决办法：禁用dns反查即可
进入/etc 找到mysql的配置文件my.cnf（linux环境下）或者my.ini(windows环境下)进行编辑加入如下一行即可：
[mysqld]
skip-name-resolve
或直接设置/etc/host进行解析
设置完成后，不再出现
5、解决方法
（1）meta data出现错误，导致操作数据库失败。重启元数据的服务可以解决。
（2）如果元数据服务重启，仍然不可用，可能数据库有问题，导致meta server 无法操作数据库，重启数据库可以解决
文章评论