java.util.ConcurrentModificationException 报错

本文深入探讨了Java中ConcurrentModificationException的产生原因,通过具体示例展示了在不同JDK版本下,使用for循环和list.remove()操作时的并发修改异常问题,并提供了多种避免该异常的迭代和删除元素的方法。

近日在项目中遇见java.util.ConcurrentModificationException报错......感觉是一个比较经典的错误,做个笔记分享一下。

 

使用for循环+list.remove();造成的。

经过如下测试,项目中使用JDK1.6出现的问题,我使用JDK1.8测试没有问题。故我判断可能和JDK版本有关系。如果你也遇到同样的问题,最好在自己的环境中测试一下。

下面是一个错误示例:Exception in thread "main" java.util.ConcurrentModificationException

public static void main(String[] args) {
		List<String> strList =new ArrayList<String>();
		strList.add("str1");
		strList.add("str2");
		strList.add("str3");
		strList.add("str4");
		strList.add("str5");
				
		for (String str : strList) {
			System.out.println(str);
			if(str.equals("str3")) {
				strList.remove(str);
			}
		}
		
	}

输出:
str1
str2
str3
Exception in thread "main" java.util.ConcurrentModificationException
	at java.util.ArrayList$Itr.checkForComodification(ArrayList.java:901)
	at java.util.ArrayList$Itr.next(ArrayList.java:851)
	at cn.sxt.dao.Test.main(Test.java:17)

下面是我测试的几种场景。(测试使用jdk1.8。和项目中jdk1.6的效果不一样。) 所以使用的话自己要亲自测试一下。

public static void main(String[] args) {
		List<User> userList = new ArrayList<User>();
		userList.add(new User(1,"悟空",30));
		userList.add(new User(2,"八戒",20));
		userList.add(new User(3,"沙和尚",10));
		System.out.println("======================第一种 for (User user : userList)=======================");
		for (User user : userList) {
			if (user.getName().equals("八戒")) {
            	userList.remove(user);
            	System.out.println("删除成功");
            }
		}
		for (User user : userList) {
			System.out.println(user);
		}
		
		System.out.println("======================第二种 Iterator List<User>=======================");
		userList = new ArrayList<User>();
		userList.add(new User(1,"悟空",30));
		userList.add(new User(2,"八戒",20));
		userList.add(new User(3,"沙和尚",10));
		Iterator<User> iterator = userList.iterator();
        while (iterator.hasNext()) {
        	User user = iterator.next();
            if (user.getName().equals("八戒")) {
            	userList.remove(user);
            	System.out.println("删除成功");
            }
        }
        for (User user : userList) {
			System.out.println(user);
		}
		
        System.out.println("======================第三种 Iterator List<Integer>=======================");
		List<Integer> arrayList = new ArrayList<Integer>();
        for (int i = 0; i < 5; i++) {
            arrayList.add(Integer.valueOf(i));
        }
        Iterator<Integer> it = arrayList.iterator();
        while (iterator.hasNext()) {
            Integer integer = it.next();
            if (integer.intValue() == 3) {
                arrayList.remove(integer);
            }
        }
        for (Integer i : arrayList) {
			System.out.print(i.intValue()+"\t");
		}
        
        System.out.println();
        System.out.println("======================第四种 for (Integer i : arrayList) =======================");
        arrayList = new ArrayList<Integer>();
        for (int i = 0; i < 5; i++) {
            arrayList.add(Integer.valueOf(i));
        }
        for (Integer i : arrayList) {
            if (i.intValue() == 3) {
                arrayList.remove(i);
            }
        }
        for (Integer i : arrayList) {
			System.out.print(i.intValue()+"\t");
		}
		
        System.out.println();
        System.out.println("======================第五种 for (int i = 0; i < strList.size(); i++)  =======================");
		List<String> strList =new ArrayList<String>();
		strList.add("str1");
		strList.add("str2");
		strList.add("str3");
		strList.add("str4");
		strList.add("str5");
		for (int i = 0; i < strList.size(); i++) {
			System.out.print(strList.get(i)+"\t");
			if(i==2){
				strList.remove(i);
			}
		}
		System.out.println();
		for (int i = 0; i < strList.size(); i++) {
			System.out.print(strList.get(i)+"\t");
		}
		
		System.out.println();
		System.out.println("======================第六种 for (String str : strList) =======================");
		strList =new ArrayList<String>();
		strList.add("str1");
		strList.add("str2");
		strList.add("str3");
		strList.add("str4");
		strList.add("str5");
		for (String str : strList) {
			System.out.println(str);
			if(str.equals("str3")) {
				strList.remove(str);
			}
		}
		
	}

测试输出结果如下:

======================第一种 for (User user : userList)=======================
删除成功
User [id=1, name=悟空, age=30]
User [id=3, name=沙和尚, age=10]
======================第二种 Iterator List<User>=======================
删除成功
User [id=1, name=悟空, age=30]
User [id=3, name=沙和尚, age=10]
======================第三种 Iterator List<Integer>=======================
0	1	2	3	4	
======================第四种 for (Integer i : arrayList) =======================
0	1	2	4	
======================第五种 for (int i = 0; i < strList.size(); i++)  =======================
str1	str2	str3	str5	
str1	str2	str4	str5	
======================第六种 for (String str : strList) =======================
str1
str2
str3
Exception in thread "main" java.util.ConcurrentModificationException
	at java.util.ArrayList$Itr.checkForComodification(ArrayList.java:901)
	at java.util.ArrayList$Itr.next(ArrayList.java:851)
	at cn.sxt.dao.Test.main(Test.java:102)

其中我参考了:https://www.cnblogs.com/snowater/p/8024776.html 这篇文章。

`java.util.ConcurrentModificationException` 通常是在使用迭代器遍历集合时,集合的结构被修改而抛出的异常。不过在 Hive SQL 中,通常不会直接出现这个异常,这个异常可能出现在底层的 Java 代码中,比如 UDF(用户自定义函数)里或者 Hive 执行过程中的 Java 代码逻辑里。 以下是一些可能的解决办法: #### 1. 检查 UDF 代码 如果在提取 JSON 数组时使用了自定义的 UDF,需要检查 UDF 代码中是否存在对集合的并发修改操作。例如,在遍历集合时调用了修改集合结构的方法。 示例: ```java import java.util.ArrayList; import java.util.Iterator; import java.util.List; // 错误示例 public class IncorrectUDF { public static void main(String[] args) { List<String> list = new ArrayList<>(); list.add("item1"); list.add("item2"); list.add("item3"); Iterator<String> iterator = list.iterator(); while (iterator.hasNext()) { String item = iterator.next(); if (item.equals("item2")) { list.remove(item); // 这里会抛出 ConcurrentModificationException } } } } // 正确示例 public class CorrectUDF { public static void main(String[] args) { List<String> list = new ArrayList<>(); list.add("item1"); list.add("item2"); list.add("item3"); Iterator<String> iterator = list.iterator(); while (iterator.hasNext()) { String item = iterator.next(); if (item.equals("item2")) { iterator.remove(); // 使用迭代器的 remove 方法 } } } } ``` #### 2. 检查 Hive 配置和版本 有时,`ConcurrentModificationException` 可能是由于 Hive 版本的 bug 或者配置问题导致的。可以尝试升级到最新的稳定版本,或者检查 Hive 的配置文件,确保没有不兼容的配置项。 #### 3. 简化查询 如果查询比较复杂,包含多个嵌套的函数或者子查询,可能会触发底层 Java 代码的并发修改问题。可以尝试简化查询,逐步排除可能的问题。 原始查询: ```sql SELECT get_json_object(exploded_json, '$.label') AS label, get_json_object(exploded_json, '$.name') AS name FROM your_table LATERAL VIEW explode(split(regexp_replace(json_column, '\\[|\\]', ''), '\\},\\{')) exploded_table AS exploded_json; ``` 可以先单独测试每个函数,确保每个步骤都能正常工作。
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

EngineerForSoul

你的鼓励是我孜孜不倦的动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值