文章详情

短信预约-IT技能 免费直播动态提醒

请输入下面的图形验证码

提交验证

短信预约提醒成功

大数组元素差异removeAll与Map效率源码对比分析

2023-07-05 11:20

关注

本文小编为大家详细介绍“大数组元素差异removeAll与Map效率源码对比分析”,内容详细,步骤清晰,细节处理妥当,希望这篇“大数组元素差异removeAll与Map效率源码对比分析”文章能帮助大家解决疑惑,下面跟着小编的思路慢慢深入,一起来学习新知识吧。

考虑这样一个场景,对两个列表对象,listAlistB,比较二者差异,找出只在 listA 中出现的元素列表 onlyListA,找出只在 listB 中出现的元素列表 onlyListB

removeAll实现

很容易想到借助 removeAll 实现,代码如下。

List<String> listA = new ArrayList<>();List<String> listB = new ArrayList<>();//仅在数组A中出现的元素List<String> onlyListA = new ArrayList<>(listA);onlyListA.removeAll(listB);//仅在数组B中出现的元素List<String> onlyListB = new ArrayList<>(listB);onlyListB.removeAll(listA);

当数组元素较少时,借助 removeAll 实现并没有任何问题。不过在数组元素较大时,removeAll 方法耗时会较大。执行如下测试方法,对数组元素个数为1000,1W,10W,100W 的场景进行测试。

public class ListDiffTest {    public static void main(String[] args) {        testRemoveAllCostTime(1000);        testRemoveAllCostTime(10000);        testRemoveAllCostTime(100000);        testRemoveAllCostTime(1000000);    }    public static void testRemoveAllCostTime(int size) {        List<String> listA = dataList(size);        listA.add("onlyAElement");        List<String> listB = dataList(size + 3);        long startTime = System.currentTimeMillis();        //仅在数组A中出现的元素        List<String> onlyListA = new ArrayList<>(listA);        onlyListA.removeAll(listB);        //仅在数组B中出现的元素        List<String> onlyListB = new ArrayList<>(listB);        onlyListB.removeAll(listA);        System.out.println("仅在集合A中出现的元素:" + onlyListA);        System.out.println("仅在集合B中出现的元素:" + onlyListB);        System.out.println("元素个数 = " + size + "时,比对耗时:" +  (System.currentTimeMillis() - startTime) + " 毫秒");    }    private static List<String> dataList(int size) {        List<String> dataList = new ArrayList<>();        for (int i = 0; i < size; i++) {            dataList.add("" + i);        }        return dataList;    }}

测试结果如下

仅在集合A中出现的元素:[onlyAElement]
仅在集合B中出现的元素:[1000, 1001, 1002]
元素个数 = 1000时,比对耗时:19 毫秒  
元素个数 = 10000时,比对耗时:299 毫秒   #1W
元素个数 = 100000时,比对耗时:24848 毫秒   #10W
元素个数 = 1000000时,比对耗时:3607607 毫秒   #100W 约60m

可以看到,当数组元素达到百万级时,耗时将达60min上下。

借助Map实现

此处给出一种优化方式,借助 Map 计数,将 List 集合中的元素作为 Map 的 key,元素出现的次数作为 Map 的 value。代码实现如下。

import io.vavr.Tuple2;public class ListDiffTest {    public static void main(String[] args) {        testDifferListByMapCostTime(1000);        testDifferListByMapCostTime(10000);        testDifferListByMapCostTime(100000);        testDifferListByMapCostTime(1000000);    }    public static void testDifferListByMapCostTime(int size) {        List<String> listA = dataList(size);        listA.add("onlyAElement");        List<String> listB = dataList(size + 3);        long startTime = System.currentTimeMillis();        //仅在数组A中出现的元素        List<String> onlyListA = tuple2._1;;        //仅在数组B中出现的元素        List<String> onlyListB = tuple2._2;        System.out.println("仅在集合A中出现的元素:" + onlyListA);        System.out.println("仅在集合B中出现的元素:" + onlyListB);        System.out.println("元素个数 = " + size + "时,比对耗时:" +  (System.currentTimeMillis() - startTime) + " 毫秒");     }        public static <E> Tuple2<List<E>, List<E>> getDiffListBtMapCompare(List<E> listA, List<E> listB) {        ValidateUtils.validateNotNull(listA, "listA");        ValidateUtils.validateNotNull(listB, "listB");        List<E> onlyAList = new ArrayList<>();        List<E> onlyBList = new ArrayList<>();        if (CollectionUtils.isEmpty(listA)) {            return Tuple.of(onlyAList, listB);        } else if (CollectionUtils.isEmpty(listB)) {            return Tuple.of(listA, onlyBList);        }                Map<E, Integer> countMap = new HashMap<>(Math.max(listA.size(), listB.size()));        for (E eleA : listA) {            countMap.put(eleA, 1);        }        for (E eleB : listB) {            countMap.put(eleB, 1 + countMap.getOrDefault(eleB, -2));        }        countMap.forEach((k, v) -> {            //获取不同元素集合            if (v == 1) {                onlyAList.add(k);            } else if (v == -1) {                onlyBList.add(k);            }        });        return Tuple.of(onlyAList, onlyBList);    }}

测试结果如下

仅在集合A中出现的元素:[onlyAElement]
仅在集合B中出现的元素:[1000, 1002, 1001]
元素个数 = 1000时,比对耗时:8 毫秒
元素个数 = 10000时,比对耗时:19 毫秒   #1W
元素个数 = 100000时,比对耗时:28 毫秒  #10W
元素个数 = 1000000时,比对耗时:96 毫秒  #100W
元素个数 = 10000000时,比对耗时:5320 毫秒  #1000W

removeAll耗时分析

最后,来分析下为什么在大数组元素比较时,removeAll 性能较差。

    public boolean removeAll(Collection<?> c) {        Objects.requireNonNull(c);        return batchRemove(c, false);    }
    private boolean batchRemove(Collection<?> c, boolean complement) {        final Object[] elementData = this.elementData;        int r = 0, w = 0;        boolean modified = false;        try {            for (; r < size; r++)                if (c.contains(elementData[r]) == complement)                    elementData[w++] = elementData[r];        } finally {            // Preserve behavioral compatibility with AbstractCollection,            // even if c.contains() throws.            if (r != size) {                System.arraycopy(elementData, r,                                 elementData, w,                                 size - r);                w += size - r;            }            if (w != size) {                // clear to let GC do its work                for (int i = w; i < size; i++)                    elementData[i] = null;                modCount += size - w;                size = w;                modified = true;            }        }        return modified;    }
    public boolean contains(Object o) {        return indexOf(o) >= 0;    }    public int indexOf(Object o) {        if (o == null) {            for (int i = 0; i < size; i++)                if (elementData[i]==null)                    return i;        } else {            for (int i = 0; i < size; i++)                if (o.equals(elementData[i]))                    return i;        }        return -1;    }

由此给出一个结论,对于大数组元素差异比较,不建议使用 removeAll,可以借助 Map 实现。

读到这里,这篇“大数组元素差异removeAll与Map效率源码对比分析”文章已经介绍完毕,想要掌握这篇文章的知识点还需要大家自己动手实践使用过才能领会,如果想了解更多相关内容的文章,欢迎关注编程网行业资讯频道。

阅读原文内容投诉

免责声明:

① 本站未注明“稿件来源”的信息均来自网络整理。其文字、图片和音视频稿件的所属权归原作者所有。本站收集整理出于非商业性的教育和科研之目的,并不意味着本站赞同其观点或证实其内容的真实性。仅作为临时的测试数据,供内部测试之用。本站并未授权任何人以任何方式主动获取本站任何信息。

② 本站未注明“稿件来源”的临时测试数据将在测试完成后最终做删除处理。有问题或投稿请发送至: 邮箱/279061341@qq.com QQ/279061341

软考中级精品资料免费领

  • 历年真题答案解析
  • 备考技巧名师总结
  • 高频考点精准押题
  • 2024年上半年信息系统项目管理师第二批次真题及答案解析(完整版)

    难度     813人已做
    查看
  • 【考后总结】2024年5月26日信息系统项目管理师第2批次考情分析

    难度     354人已做
    查看
  • 【考后总结】2024年5月25日信息系统项目管理师第1批次考情分析

    难度     318人已做
    查看
  • 2024年上半年软考高项第一、二批次真题考点汇总(完整版)

    难度     435人已做
    查看
  • 2024年上半年系统架构设计师考试综合知识真题

    难度     224人已做
    查看

相关文章

发现更多好内容

猜你喜欢

AI推送时光机
位置:首页-资讯-后端开发
咦!没有更多了?去看看其它编程学习网 内容吧
首页课程
资料下载
问答资讯