[Crash分析] java.util.ConcurrentModificationException

【类型定位】

  java.util.ConcurrentModificationException这种类型的crash我们在使用容器的迭代器的时候可能会遇到,它对应了迭代器失效这一类型的crash。这种crash的成因是在遍历容器的过程中,动态更改了容器中的内容大小(增加或者删除),这样引起了迭代器失效的问题。
  

【解决方案】

迭代器失效的问题,解决的方案比较简单:先拷贝一份临时容器存放原来容器中的内容,再对这份临时的容器进行遍历操作,这样即使在遍历操作过程中会有对容器内容有增删的操作,也可以将这部分增删操作作用于原来的容器,而不影响现在正在遍历的容器。

【代码展示】

首先是会引起java.util.ConcurrentModificationException的crash:

public class MainActivity extends AppCompatActivity {

    List<String> datas = new ArrayList<>();

    @Override
    protected void onCreate(Bundle savedInstanceState) {
        super.onCreate(savedInstanceState);
        setContentView(R.layout.activity_main);

        for (int i = 0; i < 10; ++i) {
            datas.add(i, "item" + i);
        }


        for (String str : datas) {
            removeOneDataItem(str);
            //addOneDataItem(str);
        }
    }

    void removeOneDataItem(String str) {
        datas.remove(str);
    }

    void addOneDataItem(String str) {
        datas.add(datas.size(), str);
    }
}

下面同时定义临时容器存放原来容器中的对象,遍历新的临时容器,再操作原来的容器:

public class MainActivity extends AppCompatActivity {

    List<String> datas = new ArrayList<>();

    @Override
    protected void onCreate(Bundle savedInstanceState) {
        super.onCreate(savedInstanceState);
        setContentView(R.layout.activity_main);

        for (int i = 0; i < 10; ++i) {
            datas.add(i, "item" + i);
        }


        /**
         * 关键是这一步:将原来需要遍历的容器拷贝一份临时
         *      后续遍历操作在这份容器中
         *      增删操作在原来的容器中
         */
        List<String> tempDatas = new ArrayList<>(datas);
        for (String str : tempDatas) {
            removeOneDataItem(str);
            //addOneDataItem(str);
        }


    }

    void removeOneDataItem(String str) {
        datas.remove(str);
    }

    void addOneDataItem(String str) {
        datas.add(datas.size(), str);
    }
}

【个人总结】

  1. java.util.ConcurrentModificationException 对应着迭代器失效的问题
  2. 迭代器失效问题,可以预先存一份临时容器,遍历这份临时容器,操作则在原来的容器中
07-10 01:48:26.626 3625 3625 D ApnManager: getPrivateAPN(),platform:A21,platform_private_apn:NULL 07-10 01:48:26.626 3625 3892 D ApnManager: Public network onAvailable:100 07-10 01:48:26.626 3625 3625 W ApnManager: platform:A21 has no private Network,so registerPublicNetworkCallback! 07-10 01:48:26.626 3625 3625 D ApnManagerHelp: (ApnManagerHelp.java:85)registerNetworkCallback---->callback:com.gxa.service.account.model.net.ApnManagerHelp$1@9a707f4 --------- beginning of crash 07-10 01:48:26.627 3625 3892 E AndroidRuntime: FATAL EXCEPTION: ConnectivityThread 07-10 01:48:26.627 3625 3892 E AndroidRuntime: Process: com.gxa.service.account, PID: 3625 07-10 01:48:26.627 3625 3892 E AndroidRuntime: java.util.ConcurrentModificationException 07-10 01:48:26.627 3625 3892 E AndroidRuntime: at java.util.HashMap$HashIterator.nextNode(HashMap.java:1441) 07-10 01:48:26.627 3625 3892 E AndroidRuntime: at java.util.HashMap$KeyIterator.next(HashMap.java:1465) 07-10 01:48:26.627 3625 3892 E AndroidRuntime: at com.gxa.net.ApnManager$2.onAvailable(ApnManager.java:310) 07-10 01:48:26.627 3625 3892 E AndroidRuntime: at android.net.ConnectivityManager$NetworkCallback.onAvailable(ConnectivityManager.java:3263) 07-10 01:48:26.627 3625 3892 E AndroidRuntime: at android.net.ConnectivityManager$CallbackHandler.handleMessage(ConnectivityManager.java:3481) 07-10 01:48:26.627 3625 3892 E AndroidRuntime: at android.os.Handler.dispatchMessage(Handler.java:107) 07-10 01:48:26.627 3625 3892 E AndroidRuntime: at android.os.Looper.loop(Looper.java:214) 07-10 01:48:26.627 3625 3892 E AndroidRuntime: at android.os.HandlerThread.run(HandlerThread.java:67) 07-10 01:48:26.627 3625 3892 E CrashHandler: !!捕获到未处理异常!! 07-10 01:48:26.627 3625 3892 E CrashHandler: java.util.ConcurrentModificationException 07-10 01:48:26.627 3625 3892 E CrashHandler: at java.util.HashMap$HashIterator.nextNode(HashMap.java:1441) 07-10 01:48:26.627 3625 3892 E CrashHandler: at java.util.HashMap$KeyIterator.next(HashMap.java:1465) 07-10 01:48:26.627 3625 3892 E CrashHandler: at com.gxa.net.ApnManager$2.onAvailable(ApnManager.java:310) 07-10 01:48:26.627 3625 3892 E CrashHandler: at android.net.ConnectivityManager$NetworkCallback.onAvailable(ConnectivityManager.java:3263) 07-10 01:48:26.627 3625 3892 E CrashHandler: at android.net.ConnectivityManager$CallbackHandler.handleMessage(ConnectivityManager.java:3481) 07-10 01:48:26.627 3625 3892 E CrashHandler: at android.os.Handler.dispatchMessage(Handler.java:107) 07-10 01:48:26.627 3625 3892 E CrashHandler: at android.os.Looper.loop(Looper.java:214) 07-10 01:48:26.627 3625 3892 E CrashHandler: at android.os.HandlerThread.run(HandlerThread.java:67)
08-05
`java.util.ConcurrentModificationException` 通常是在使用迭代器遍历集合时,集合的结构被修改而抛出的异常。不过在 Hive SQL 中,通常不会直接出现这个异常,这个异常可能出现在底层的 Java 代码中,比如 UDF(用户自定义函数)里或者 Hive 执行过程中的 Java 代码逻辑里。 以下是一些可能的解决办法: #### 1. 检查 UDF 代码 如果在提取 JSON 数组时使用了自定义的 UDF,需要检查 UDF 代码中是否存在对集合的并发修改操作。例如,在遍历集合时调用了修改集合结构的方法。 示例: ```java import java.util.ArrayList; import java.util.Iterator; import java.util.List; // 错误示例 public class IncorrectUDF { public static void main(String[] args) { List<String> list = new ArrayList<>(); list.add("item1"); list.add("item2"); list.add("item3"); Iterator<String> iterator = list.iterator(); while (iterator.hasNext()) { String item = iterator.next(); if (item.equals("item2")) { list.remove(item); // 这里会抛出 ConcurrentModificationException } } } } // 正确示例 public class CorrectUDF { public static void main(String[] args) { List<String> list = new ArrayList<>(); list.add("item1"); list.add("item2"); list.add("item3"); Iterator<String> iterator = list.iterator(); while (iterator.hasNext()) { String item = iterator.next(); if (item.equals("item2")) { iterator.remove(); // 使用迭代器的 remove 方法 } } } } ``` #### 2. 检查 Hive 配置和版本 有时,`ConcurrentModificationException` 可能是由于 Hive 版本的 bug 或者配置问题导致的。可以尝试升级到最新的稳定版本,或者检查 Hive 的配置文件,确保没有不兼容的配置项。 #### 3. 简化查询 如果查询比较复杂,包含多个嵌套的函数或者子查询,可能会触发底层 Java 代码的并发修改问题。可以尝试简化查询,逐步排除可能的问题。 原始查询: ```sql SELECT get_json_object(exploded_json, '$.label') AS label, get_json_object(exploded_json, '$.name') AS name FROM your_table LATERAL VIEW explode(split(regexp_replace(json_column, '\\[|\\]', ''), '\\},\\{')) exploded_table AS exploded_json; ``` 可以先单独测试每个函数,确保每个步骤都能正常工作。
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值