因为使用ArrayList.removeAll(List list)导致的机器重启

背景

先说一下背景,博主所在的业务组有一个核心系统,需要同步两个不同数据源给过来的数据到redis中,但是每次同步之前需要过滤掉一部分数据,只存储剩下的数据。每次同步的数据与需要过滤掉的数据量级大概在0-100w的数据不等。

由于是两个数据源,虽然拿到数据后存数据的代码能共用,但是从数据源拿数据由于协议不同所以还是需要分开写,就安排了两位同事完成这个任务。

重启现象

项目上线大半年,线上运行一直很平稳,突然在某一天ops开始报警该系统的两台机器一直在重启,cpu也一直报警,线上cpu监控如下所示:

机器也处于不断重启中:

两台机器表现几乎一致,于是马上重启一台机器,另外一台机器抓取一下线程详情。直接用下面的火线图更明显:

可以看到几乎80%的cpu都在做一件事情:ArrayList.removeAll(),根据线程栈找到了线上的代码大致如下:

下班了。明天更

相关推荐

  1. 导致服务器原因都有哪些,要如何处理

    2024-04-10 03:00:04       60 阅读
  2. 手误修改了spfile导致实例失败

    2024-04-10 03:00:04       32 阅读
  3. 使用CDHapi接口对cdh服务进行滚动

    2024-04-10 03:00:04       59 阅读

最近更新

  1. docker php8.1+nginx base 镜像 dockerfile 配置

    2024-04-10 03:00:04       98 阅读
  2. Could not load dynamic library ‘cudart64_100.dll‘

    2024-04-10 03:00:04       106 阅读
  3. 在Django里面运行非项目文件

    2024-04-10 03:00:04       87 阅读
  4. Python语言-面向对象

    2024-04-10 03:00:04       96 阅读

热门阅读

  1. RestTemplate的使用教程

    2024-04-10 03:00:04       27 阅读
  2. [鹤城杯 2021]Crazy_Rsa_Tech(低加密指数广播攻击)

    2024-04-10 03:00:04       33 阅读
  3. Oracle测试10046参数及打印结果

    2024-04-10 03:00:04       36 阅读
  4. Go语言中如何实现继承

    2024-04-10 03:00:04       39 阅读
  5. c++ 根据ip主机号和子网掩码随机生成ip

    2024-04-10 03:00:04       39 阅读
  6. 深入理解JVM后端优化技术-锁消除(Lock Elision)

    2024-04-10 03:00:04       37 阅读
  7. C++中的字符转换 to_string、sto

    2024-04-10 03:00:04       37 阅读
  8. Qt实现comboBox的初试化

    2024-04-10 03:00:04       37 阅读