背景:有一批数据源从kafka给过来,接收到后需要处理,然后入库,我们用一个线程消费下来,一次消费30000条, 按照对象的概念,可以用List<Person>来表示,因为某种原因,需要根据记录的主键personId先在内存做去重(覆盖)处理 在新特性之前,正常的思路会是:list转为map,key为personId,put的时候相同的personId后面的覆盖前面的 java8新特性中,对这种情形有优雅的处理方式,我们分两种: (1)不关心覆盖逻辑,相同personId只留一条 public

http://blog.csdn.net/jiaobuchong/article/details/54412094 public List<String> removeStringListDupli(List<String> stringList) { Set<String> set = new LinkedHashSet<>(); set.addAll(stringList); stringList.clear(); stringList.addAll(s

1. 常规元素去重 碰到List去重的问题,除了遍历去重,我们常常想到利用Set集合不允许重复元素的特点,通过List和Set互转,来去掉重复元素. // 遍历后判断赋给另一个list集合,保持原来顺序 public static void ridRepeat1(List<String> list) { System.out.println("list = [" + list + "]"); List<String> listNew = ne

java8实现列表去重,java8的stream和lambda的使用实例 通过普通的方式也可以达到去重的效果,但是借助java8新特性可以很方便的实现列表去重,测试demo如下 实体类: public class Person { private int id; private String name; private int age; public Person() { } public Person(int id, String name, int age) { this.id = id;

Java 8 新特性之--Stream 一. 简单介绍 Stream是Java 8提出了的一种新的对集合对象功能的增强.它集合Lambda表达式,对集合提供了一些非常便利,高效的操作,使得代码具有非常高的可读性,优雅性!!举个例子来说,它就像一个流水线操作,对输入流水线的东西(水果)进行一系列加工处理,最后获取到我们需要的某种特殊的水果(没有洗过的苹果). Stream提供了对集合的便捷化处理方式 声明式编程的思想 代码更加优雅,简洁,不信往下看→_→ 来个例子来看看Stream风格 上海从今年

Spring学习指南 内容提要 ​ Spring框架是以简化J2EE应用程序开发为特定目标而创建的,是当前最流行的Java开发框架. ​ 本书从介绍Spring框架入手,针对Spring4.3和Java8介绍bean的配置.依赖注入.定义bean.基于Java的容器.AOP.Spring Data.Spring MVC等知识,旨在帮助读者更轻松的学习Spring框架的方法. 第一章 Spring框架简介 简介 1.创建结构良好.易于维护和易于测试的应用程序是开发者的职责 2.Spring框架是S

1.泛型理解 2.java或Java框架中常用的注解及其作用详解 3.三层架构和MVC的区别 4.jdk1.8手册(提取码:bidm) 5.Rocketmq原理&最佳实践 6.spring入门概念 7.java学习公众号:推荐1.推荐2 8.java8流计算去重方法:推荐1.推荐2

/** * 按照指定字段给list去重 * @param list * @return */ public static List<DataModel> niqueList(List<DataModel> list){ //去重,根据code字段 List<DataModel> uniqueList = list.stream().collect( collectingAndThen( toCollection(() -> new TreeSet<>(

private static List<User> list = new ArrayList<User>(); public static void main(String[] args) { list = Arrays.asList( new User(1, "a", 10), new User(4, "d", 19), new User(5, "e", 13), new User(2, "b", 1

  import java.util.ArrayList;import java.util.List;import org.apache.shiro.SecurityUtils;import org.apache.shiro.subject.Subject;import java.util.*;import java.util.stream.Collectors; import static java.util.Comparator.comparing;import static java.ut

编写工具类 public class DistinctUtil { public static <T> Predicate<T> distinctByKey(Function<? super T, ?> keyExtractor) { Map<Object, Boolean> seen = new ConcurrentHashMap<>(); return t -> seen.putIfAbsent(keyExtractor.apply(t

list中的对象某个属性存在重复时将重复的对象去重 //根据skuAttrValueName值去重 List<SkuValue> uniqueSkuValues = skuValues.stream().collect( Collectors.collectingAndThen(Collectors.toCollection( () -> new TreeSet<>(Comparator.comparing(o -> o.getSkuAttrValueName())))

//定义一个100元素的集合,包含A-Z List<String> list = new LinkedList<>(); for (int i =0;i<100;i++){ list.add(String.valueOf((char)('A'+Math.random()*('Z'-'A'+1)))); } System.out.println(list); //统计集合重复元素出现次数,并且去重返回hashmap Map<String, Long> map = l

java 8 去重和排序 排序的方法 List<Integer> lists = Arrays.asList(1,1,2,3); // 升序 lists.sort(Comparator.comparing(Integer::intValue)); // 降序 lists.sort(Comparator.comparing(Integer::intValue).reversed()); 或者 // 升序 lists.stream().sorted().collect(Collectors.toL

测试po package com.shiwulian.test.po; public class Person {private String id;private String name;private Integer age;public String getId() {return id;}public void setId(String id) {this.id = id;}public String getName() {return name;}public void setName

先收集再排序. public static void main(String[] args) { BookBo bookBo1 = new BookBo("1", "语文"); BookBo bookBo2 = new BookBo("2", "数学"); BookBo bookBo3 = new BookBo("3", "英语"); BookBo bookBo4 = new BookB

1. 添加方法: import java.util.concurrent.ConcurrentHashMap; import java.util.function.Function; import java.util.function.Predicate; import java.util.stream.Collectors; private static <T> Predicate<T> distinctByKey(Function<? super T, Object>

//测试数据 WaterMeter w0 = new WaterMeter(); WaterMeter w1 = new WaterMeter(); WaterMeter w2 = new WaterMeter(); w0.setFid("1"); w0.setBatchNo("aaaa"); w1.setFid("1"); w1.setBatchNo("bbbbb"); w2.setFid("2"); w

1. 使用java8 提取出 list 中 bean 的某一属性 public static void main(String[] args) { List<Student> stuList = new ArrayList<Student>(); Student st1 = new Student("123","aaa"); Student st2 = new Student("234","bbb");

1.Lambda表达式 Lambda 是一个匿名函数,我们可以把 Lambda 表达式理解为是一段可以传递的代码(将代码像数据一样进行传递).使用它可以写出更简洁.更灵活的代码.作为一种更紧凑的代码风格,使Java的语言表达能力得到了提升. 1.1 语法组成 操作符为" -> " ,被称为 Lambda 操作符或箭头操作符; 将 Lambda 分为两个部分: 左侧:指定了 Lambda 表达式需要的参数列表: 右侧:指定了 Lambda 体,是抽象方法的实现逻辑,也即Lambda