cdp集群Hbase组件HRegionServer服务停止原因以及排查

前言:重启集群后某一节点HRegionServer服务停止,重启前所有服务均正常

去查看日志:
日志报错

ERROR HRegionServer
Master rejected startup because clock is out of sync
org.apache.hadoop.hbase.ClockOutOfSyncException: org.apache.hadoop.hbase.ClockOutOfSyncException: Server cloudcdp05.hadoop.com,16020,1713404049250 has been rejected; Reported time is too far out of sync with master. Time difference of 31113ms > max allowed of 30000ms
09:34:20.321 ERROR HRegionServerCommandLine
Region server exiting
java.lang.RuntimeException: HRegionServer Aborted

HBase 主节点拒绝了某个区域服务器的启动,因为区域服务器的系统时钟与主节点的系统时钟相差太大。
去查看对应节点后台,发现ntp服务正常启动,但是没有与主节点进行时间同步
在这里插入图片描述
怀疑是主节点ntp服务没启起来,去主节点查看ntp是active状态,
可能是没识别问题节点,把主节点和问题节点的ntp服务重启一下就好了

#重启ntp服务
systemcl restart ntpd

后续查看同步状态

ntp -q

可以看到时间同步过去了,问题解决。

相关推荐

  1. Hbase 搭建

    2024-04-22 22:32:02       36 阅读
  2. 25台es停止步骤

    2024-04-22 22:32:02       7 阅读
  3. 速盾:cdn防御空间dns服务器

    2024-04-22 22:32:02       29 阅读

最近更新

  1. TCP协议是安全的吗?

    2024-04-22 22:32:02       18 阅读
  2. 阿里云服务器执行yum,一直下载docker-ce-stable失败

    2024-04-22 22:32:02       19 阅读
  3. 【Python教程】压缩PDF文件大小

    2024-04-22 22:32:02       18 阅读
  4. 通过文章id递归查询所有评论(xml)

    2024-04-22 22:32:02       20 阅读

热门阅读

  1. Docker 更新容器状态 开启/关闭 开机自启动

    2024-04-22 22:32:02       40 阅读
  2. 数据结构——线索树

    2024-04-22 22:32:02       38 阅读
  3. 【数据结构】分块查找

    2024-04-22 22:32:02       19 阅读
  4. 每日一练:九九乘法表(双重循环)

    2024-04-22 22:32:02       41 阅读
  5. json文件的格式化

    2024-04-22 22:32:02       39 阅读
  6. 双向链表的实现

    2024-04-22 22:32:02       17 阅读
  7. 高级软考项目管理之项目进度管理

    2024-04-22 22:32:02       48 阅读
  8. 计算机网络面试问题

    2024-04-22 22:32:02       52 阅读
  9. pprof火焰图排查问题小计

    2024-04-22 22:32:02       16 阅读