java.util.ConcurrentModificationException故障分析

• 问题描述
  账号打通上线后发现偶尔会出现java.lang.RuntimeException: java.util.ConcurrentModificationException异常，这个是在生成请求签名的时候发生的问题，经分析应该是阿里云网关比较老版本的方法有bug。这个会导致线上用户突然掉线，体验太差。
• 出现该Exception的根本原因
  在对Vector、ArrayList在迭代的时候如果同时对其进行修改就会抛出java.util.ConcurrentModificationException异常。
• 解决过程
  将老的换成新的阿里云网关SDK，在修改过程中发现jar包中一个方法参数传入错误，因此暂时不采用这种方式。采用方法重试因为这并不是因为逻辑错误导致，而是框架不稳定造成的，类似的像阿里云memcache不稳定的情况也可以采用复试的方法，这样可以有效的提高用户体验。

• 修改的关键代码

• int retry_max = 3;
  for (int i = 0; i < retry_max; i++) {
      try {
          response = Client.execute(request);
          break;
      } catch (ConcurrentModificationException exception) {
          continue;
      } catch (Exception e) {
          break;
      }
  }

  这里需要注意：idea会提示continue是不必要的，因为在循环内抛出异常会直接跳出本次循环进入下一次循环，因此并不需要写continue也可以进入下次循环，但是这写可以提高可读性，暂时保留。

• 测试思路

  由于这是一个并发问题，而服务的访问量级也在10000，因此发一万次请求模仿线上环境
  
  

• 测试代码

  for (int i = 0; i< 10000;i++){
      CloseableHttpClient httpclient = HttpClients.createDefault();
      HttpGet httpget = new HttpGet("https://r2test.mjb6.cn:8443/api/user/detail?token=1422290-EqEE4pxRvk51K9KCkZpknRC4rj7y6GMa");
      CloseableHttpResponse response = httpclient.execute(httpget);
      LOGGER.error("response="+JSON.toJSONString(response));
  }