精华内容
下载资源
问答
  • Java8 串行流和并行流效率对比
    2021-11-22 20:13:30

    哈哈,废话不多说,上菜:

    
    /**
     * 串行流: 所有的数据操作都在一个线程中 通过stream()方法获得的都是串行流
     * 并行流: 将数据分成多块,并在不同的线程分别处理每一块的数据,通过 parallelStream()实现
     *
     * 列子:用串行流计算0-2000000的和,用并行流计算0-200000的和
     *
     */
    public class LamdbaExpress01 {
        public static void main(String[] args) {
            testStream();
            testParallelStream();
    
        }
    
        public static void testStream(){
            long startStream = System.currentTimeMillis();
            long sumStream = LongStream.rangeClosed(0, 2000000).sum();
            System.out.println("串行流总和:"+sumStream);
            long endStream = System.currentTimeMillis();
            System.out.println("总耗费时间:"+(endStream-startStream));
        }
    
        public static void testParallelStream(){
            long startTime = System.currentTimeMillis();
            long sumStream = LongStream.rangeClosed(0, 2000000).parallel().sum();
            System.out.println("并行流总和:"+sumStream);
            long endTime = System.currentTimeMillis();
            System.out.println("总耗费时间:"+(endTime-startTime));
        }
    }
    

    输出结果:

    串行流总和:2000001000000
    总耗费时间:156
    并行流总和:2000001000000
    总耗费时间:16

    很显然,并行流节约了很多时间。对并行流的底层实现感兴趣的同学可以去看看。

    更多相关内容
  • 主要介绍了JDK8并行流及串行流区别原理详解,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下
  • 串行流和并行流

    2021-07-16 00:07:24
    stream() − 为集合创建串行流。【线程是安全的】 parallelStream() − 为集合创建并行流。【底层是多线程处理,线程不安全,可以设置线程。可以解决线程安全】 使用场景:数据量大,且业务复杂,用并行,数据量少...

    Stream流是java支持的一种流水线式处理数据的方式,也是jdk8的一种特性。

    Collection体系下有两个方法可以获取获取Stream(直接通过集合对象调用方法获取即可)

    1. stream() − 为集合创建串行流。【线程是安全的】
    2. parallelStream() − 为集合创建并行流。【底层是多线程处理,线程不安全,可以设置线程。可以解决线程安全】

    使用场景:数据量大,且业务复杂,用并行,数据量少且业务简单,用串行。

    public class StreamTest {
        public static void main(String[] args) {
            List<Integer> list = Arrays.asList(4, 3, 4, 5, 2, 1);
            final Stream<Integer> stream = list.stream();//获取串行流对象
            //将流中元素自然排序
    		//stream.sorted().forEach(System.out::println);
            //去重
            stream
                    .distinct()//将流中元素去重
                    .sorted()//将流中元素排序
                    .forEach(System.out::println);
            //过滤    //过滤掉大于3的所有元素
            //stream.filter(t -> t > 3).forEach(System.out::println);
            //将stream流对象转换为List对象
            //final List<Integer> collect = stream.collect(Collectors.toList());
            //System.out.println(collect);
            //合并,拼接
            final List<String> list1 = Arrays.asList("小易", "boyas", "星河", "angel651");
            //调用parallelStream方法获取并行流
            final Stream<String> parallelStream = list1.parallelStream();
            //将parallelStream中元素进行拼接【元素类型必须是string类型】
            final String collect1 = parallelStream.collect(Collectors.joining("=>"));
            System.out.println(collect1);
        }
    }
    

    在这里插入图片描述

    展开全文
  • 并行流与串行流1、概述2、实例 1、概述 并行流就是把一个内容分成多个数据块,并用不同的线程分 别处理每个数据块的流。 Java 8 中将并行进行了优化,我们可以很容易的对数据进行并 行操作。Stream API 可以声明性地...

    并行流与串行流

    1、概述

    并行流就是把一个内容分成多个数据块,并用不同的线程分 别处理每个数据块的流。
    Java 8 中将并行进行了优化,我们可以很容易的对数据进行并 行操作。Stream API 可以声明性地通过 parallel() 与 sequential() 在并行流与顺序流之间进行切换。

    2、实例

    若我们需要计算从0到1000000000L的累计和,若是普通的从0加到1000000000L,势必对cpu的利用率不高,我们做个测试
    1、普通的累加和:

    long start = System.currentTimeMillis();
    		
    		long sum = 0L;
    		
    		for (long i = 0L; i <= 1000000000L; i++) {
    			sum += i;
    		}
    		
    		System.out.println(sum);
    		
    		long end = System.currentTimeMillis();
    		
    		System.out.println("耗费的时间为: " + (end - start));
    

    在这里插入图片描述
    2、采用并行流计算

    long start = System.currentTimeMillis();
    		Long sum1 = LongStream.rangeClosed(0L, 1000000000L)
    							 .parallel()
    							 .reduce(0,Long::sum);
    		
    		System.out.println(sum1);
    		long end = System.currentTimeMillis();
    		
    		System.out.println("耗费的时间为: " + (end - start));
    

    在这里插入图片描述

    从结果来看,差距并不是很大,有时候并行流执行时间比普通的累计还长,是因为并行流执行的时候会递归将计算进行差分,最后再将拆分的结果合并,会消耗掉一部分时间。所以,可以增大数据量去测试,效果就会很明显。

    加大数据量,计算从0到10000000000L
    1、普通累加和:
    在这里插入图片描述
    2、并行流计算
    在这里插入图片描述

    可以看到,数据已经溢出了,但是我们观察消耗时间可以发现,数据量越大,并行流的优势越明显

    展开全文
  • 强大的Stream API以及并行流与串行流

    千次阅读 2019-07-23 14:53:46
    文章目录Stream APIStreamStream操作的三个步骤创建Stream中间操作终止操作创建StreamStream的中间操作筛选与切片映射排序Stream的终止操作查找与匹配归约收集并行流与串行流了解Fork/Join框架Fork/Join框架与传统...

    Stream API

    Stream是Java8中处理集合的关键抽象概念,它可以指定你希望对集合进行的操作,可以执行非常复杂的查找、过滤和映射数据等操作。使用Stream API对集合数据进行操作,就类似于使用SQL执行的数据库查询。也可以使用Stream API来并行执行操作。简而言之,Stream API提供了一种高效且易于使用的处理数据的方式。

    Stream

    流(Stream)是数据渠道,用于操作数据源(集合、数组等)所生成的元素序列。
    集合讲的是数据,流讲的是计算

    • 注意
      • Stream自己不会存储元素。
      • Stream不会改变源对象。相反,它们会返回一个持有结果的新Stream。
      • Stream操作是延迟执行的。这意味着它们会等到需要结果的时候才执行。

    Stream操作的三个步骤

    创建Stream

    一个数据源(如:集合、数组),获取一个流。

    中间操作

    一个中间操作链,对数据源的数据进行处理。

    终止操作

    一个终止操作,执行中间操作链,并产生结果。
    在这里插入图片描述

    创建Stream

    Java8中的Collection接口被扩展,提供了两个获取流的方式:

    • default Stream<E> stream():返回一个顺序流。
    • default Stream<E> parallelStream():返回一个并行流。
    /**
    * 创建Stream
    */
    @Test
    public void test1(){
        //1.Collection提供了两个方法stream() 与 parallelStream()
        List<String> list = new ArrayList<>();
        //获取一个顺序流
        Stream<String> stream = list.stream();
        //获取一个并行流
        Stream<String> stream1 = list.parallelStream();
        //2.通过Arrays的stream()获取一个数组流,数组获取流只能这样获取
        Integer[] nums = new Integer[10];
        Stream<Integer> stream2 = Arrays.stream(nums);
        //3.通过Stream类中的静态方法 of() 获取流
        Stream<Integer> stream3 = Stream.of(1, 2, 3, 4, 5);
        //4.创建无限流,以0为起始值,做一元运算,取10个
        Stream<Integer> stream4 = Stream.iterate(0, (x) -> x + 2).limit(10);
        stream4.forEach(System.out::println);
        //5.生成,随机生成数,取两个。Math::random只能这么写,如果按照普通方法调用Math.random会报错
        //因为generate中传的是供给型接口,不需要参数,但有返回值
        Stream<Double> stream5 = Stream.generate(Math::random).limit(2);
        stream5.forEach(System.out::println);
    }
    

    Stream的中间操作

    多个中间操作可以连接起来形成一个流水线,除非流水线上触发终止操作,否则中间操作不会执行任何的处理!而在终止操作时一次性全部处理,称为“惰性求值”,也叫延迟加载

    中间操作返回的值,还是一个Stream流对象

    筛选与切片

    方法描述
    filter(Predicate p)接收Lambda,从流中排除元素。接收的lambda是一个断言型接口,接收一个参数,返回boolean值
    distinct()筛选,去重。通过流所生成元素的hashCode()和equals()去除重复元素
    limit(long maxSize)截断流,使其元素不超过给定数量
    skip(long n)跳过元素,返回一个扔掉了前 n 个元素的流。若流中元素不足 n 个,则返回一个空流。与limit(n)互补

    将要用到的pojo类,Employee

    package com.wangwren.exer;
    import org.w3c.dom.NameList;
    import java.util.Objects;
    /**
    * @author: wangwren
    * @date: 2019/3/30
    * @descripton:
    * @version: 1.0
    */
    public class Employee {
        private Integer id;
        private String name;
        private Integer age;
        private Double salary;
        private Status status;
        public Employee() {
        }
        public Employee(String name,Integer age){
            this.name = name;
            this.age = age;
        }
        public Employee(Integer id, String name, Integer age, Double salary) {
            this.id = id;
            this.name = name;
            this.age = age;
            this.salary = salary;
        }
        public Employee(Integer id, String name, Integer age, Double salary, Status status) {
            this.id = id;
            this.name = name;
            this.age = age;
            this.salary = salary;
            this.status = status;
        }
        @Override
        public String toString() {
            return "Employee{" +
                "id=" + id +
                ", name='" + name + '\'' +
                ", age=" + age +
                ", salary=" + salary +
                '}';
        }
    
        @Override
        public boolean equals(Object o) {
            if (this == o) return true;
            if (o == null || getClass() != o.getClass())
            return false;
            Employee employee = (Employee) o;
            return Objects.equals(id, employee.id) &&
                Objects.equals(name, employee.name) &&
                Objects.equals(age, employee.age) &&
                Objects.equals(salary, employee.salary);
        }
    
        @Override
        public int hashCode() {
        return Objects.hash(id, name, age, salary);
        }
        public enum Status{
            BUSY,
            FREE,
            VOCATION;
        }
        public Status getStatus() {
            return status;
        }
        public void setStatus(Status status) {
            this.status = status;
        }
        public String show(){
            return "测试方法引用";
        }
        public Integer getId() {
            return id;
        }
        public void setId(Integer id) {
            this.id = id;
        }
        public String getName() {
            return name;
        }
        public void setName(String name) {
            this.name = name;
        }
        public Integer getAge() {
            return age;
        }
        public void setAge(Integer age) {
            this.age = age;
        }
        public Double getSalary() {
            return salary;
        }
        public void setSalary(Double salary) {
            this.salary = salary;
        }
    }
    
        //2.中间操作
        List<Employee> emps = Arrays.asList(
        new Employee(102, "李四", 59, 6666.66),
        new Employee(101, "张三", 18, 9999.99),
        new Employee(103, "王五", 28, 3333.33),
        new Employee(104, "赵六", 8, 7777.77),
        new Employee(104, "赵六", 8, 7777.77),
        new Employee(104, "赵六", 8, 7777.77),
        new Employee(105, "田七", 38, 5555.55)
        );
    /**
    * 筛选与切片
    * filter:接收Lambda,从流中排除某些元素
    * limit:截断流,使其元素不超过给定数量
    * skip(n):跳过元素,返回一个扔掉了前n个元素的流。若流中元素不足 n 个,则返回一个空流。与limit互补。
    * distinct:筛选,通过流所生成元素的hashCode()和equals()去除重复元素。
    */
    @Test
    public void test2(){ 
        //过滤操作,返回年龄小于等于35的
        //所有的中间操作不会做任何处理
        Stream<Employee> stream = emps.stream().filter((e) -> {
            System.out.println("测试中间操作");
            return e.getAge() <= 35;
        });
        //终止操作,forEach遍历一下
        //只有当做终止操作时,所有的中间操作会一次性的全部执行,称为“惰性求值”
        //内部迭代,迭代操作Stream API内部完成
        stream.forEach(System.out::println);
    }
    //这是外部迭代,需要自己写
    @Test
    public void test3(){
        Iterator<Employee> iterator = emps.iterator();
        while (iterator.hasNext()){
            System.out.println(iterator.next());
        }
    }
    /**
    * limit操作,带有短路效果 
    *通过打印结果可以看出,filter过滤会一个一个数据进行判断,这里limit设为3
    * 当已经有3个值满足时,就不会再进行中间操作了,即后面的数据不会进行操作,称为短路,
    * 与 &&,|| 短路相似
    */
    @Test
    public void test4(){
        emps.stream()
            .filter((e) -> {
                System.out.println("短路");
                return e.getSalary() >= 5000;
            })
            .limit(3) 
            .forEach(System.out::println);
    }
    
    /**
    * skip操作
    */
    @Test
    public void test5(){
        //扔掉满足过滤的条件的前两个数据 
        emps.stream()
            .filter((e) -> e.getSalary() >= 5000)
            .skip(2)
            .forEach(System.out::println);
    }
    
    /**
    * distinct去重操作
    * 这里Employee是自己定义的类,需要重写hashCode和equals()方法 
    * 去重才有效果,否则去不了重复
    */
    @Test
    public void test6(){
        emps.stream()
            .distinct()
            .forEach(System.out::println);
    }
    

    映射

    方法描述
    map(Function f)接收一个函数作为参数,该函数会被应用到每个元素上,并将其映射成一个新的元素。
    mapToDouble(ToDoubleFunction f)接收一个函数作为参数,该函数会被应用到每个元素上,产生一个新的DoubleStream.
    mapToInt(ToIntFunction f)接收一个函数作为参数,该函数会被应用到每个元素上,产生一个新的IntStream。
    mapToLong(ToLongFunction f)接收一个函数作为参数,该函数会被应用到每个元素上,产生一个新的LongStream。
    flatMap(Function f)接收一个函数作为参数,将流中的每个值都换成另一个流,然后把所有流连接成一个流。
    /**
    * 映射
    * map:接收Lambda,将元素转换成其他形式或提取信息。
    * 接收一个函数作为参数,该函数会被应用到每个元素上,并将其映射成一个新的元素
    * 
    * flatMap:接收一个函数作为参数,将流中的每个值都换成另一个流。然后把所有流连接成一个流 
    *
    */
    @Test
    public void test1(){
        Stream<String> stream = emps.stream()
            .map((e) -> e.getName());
        System.out.println("-----------------------");
        
        List<String> strList = Arrays.asList("aaa","bbb","ccc","ddd");
        //通过map,其中传入一个转大写的函数
        Stream<String> stream1 = strList.stream()
            .map(String::toUpperCase);
        //遍历输出stream1流,发现数据全变大写了,原本的strList没变 
        
        stream1.forEach(System.out::println);
        System.out.println("--------------------------");
        
        //使用map去调用自定义的方法
        //看这个变量的定义,是一个Stream中还有一个Stream
        Stream<Stream<Character>> stream2 = strList.stream()
            .map(TestStreamAPI2::filterCharacter);
            
        stream2.forEach((sm) -> {
            sm.forEach(System.out::println);
        });
        System.out.println("----------------------------");
        
        //使用flatMap去调用自定义方法
        //注意看这个变量的定义,与stream2的区别,这就是合并成一个流了
        Stream<Character> stream3 = strList.stream()
            .flatMap(TestStreamAPI2::filterCharacter);
            
        stream3.forEach(System.out::println);
    }
    /**
    * 自定义方法:接收一个字符串
    * 取出字符串中的字符,添加至list集合中
    * 返回list集合的stream流
    */
    public static Stream<Character> filterCharacter(String str){
        List<Character> list = new ArrayList<>();
        for (Character ch : str.toCharArray()){
            list.add(ch);
        }
        return list.stream();
    }
    

    排序

    方法描述
    sorted()产生一个新流,其中按自然顺序排序。
    sorted(Comparator comp)产生一个新流,其中按比较器顺序排序
    /**
    * sorted():自然排序
    * sorted(Comparator com):定制排序
    */
    @Test
    public void test2(){
        //自然排序
        emps.stream()
            .map(Employee::getName)
            .sorted()
            .forEach(System.out::println);
        System.out.println("-------------------");
        //定制排序
        emps.stream()
            .sorted((x,y) -> {
                if (x.getAge().equals(y.getAge())){
                    return x.getName().compareTo(y.getName());
                }else {
                    return Integer.compare(x.getAge(),y.getAge());
                }
            })
            .forEach(System.out::println);
    }
    

    Stream的终止操作

    终止操作会从流的流水线生产结果。其结果可以是任何不是流的值。例如:List、Integer,甚至是void。
    终止操作与中间操作相比,终止操作返回值已经不再是Stream流对象了,所以叫终止操作,能够获取到对应的值了

    查找与匹配

    方法描述
    allMatch(Predicate p)检查是否匹配所有元素
    anyMatch(Predicate p)检查是否至少匹配一个元素
    noneMatch(Predicate p)检查是否没有匹配所有元素
    findFirst()返回第一个元素
    findAny()返回当前流中的任意元素
    count()返回流中元素总数
    max(Comparator c)返回流中最大值
    min(Comparator c)返回流中最小值
    forEach(Consumer c)内部迭代(使用Collection接口需要用户去做迭代,称为外部迭代。相反,Stream API使用内部迭代,它帮你把迭代做了)
    public class TestStreamAPI3 {
        List<Employee> emps = Arrays.asList(
        new Employee(102, "李四", 59, 6666.66,Employee.Status.BUSY), 
        new Employee(101, "张三", 18, 9999.99, Employee.Status.FREE),
        new Employee(103, "王五", 28, 3333.33, Employee.Status.VOCATION),
        new Employee(104, "赵六", 8, 7777.77, Employee.Status.BUSY),
        new Employee(104, "赵六", 8, 7777.77, Employee.Status.FREE),
        new Employee(104, "赵六", 8, 7777.77, Employee.Status.FREE),
        new Employee(105, "田七", 38, 5555.55, Employee.Status.BUSY)
        );
        
        //终止操作
        /**
        * allMatch:检查是否匹配所有元素
        * anyMatch:检查是否至少匹配一个元素
        * noneMatch:检查是否没有匹配的元素
        * findFirst:返回第一个元素 
        * findAny:返回当前流中的任意元素
        * count:返回流中元素的总个数
        * max:返回流中最大值
        * min:返回流中最小值
        */
        @Test
        public void test1(){
            //是否匹配所有元素
            boolean b1 = emps.stream()
                .allMatch((e) ->e.getStatus().equals(Employee.Status.BUSY));
            System.out.println(b1);
            
            //是否至少匹配一个元素
            boolean b2 = emps.stream()
                .anyMatch((e) -> e.getStatus().equals(Employee.Status.BUSY));
            System.out.println(b2);
            
            //检查是否没有匹配的元素
            boolean b3 = emps.stream()
                .noneMatch((e) -> e.getStatus().equals(Employee.Status.BUSY));
            System.out.println(b3);
        }
        @Test
        public void test2(){
            //返回第一个元素。按工资排序 
            //Optional也是Java8中提供的新特性,防止空异常
            //这里返回Optional只是它觉得有可能为空
            Optional<Employee> optional = emps.stream()
                .sorted((e1, e2) -> Double.compare(e1.getSalary(), e2.getSalary()))
                .findFirst();
            System.out.println(optional.get());
            System.out.println("----------------------------");
            
            //返回当前流中的任意元素
            Optional<Employee> any = emps.parallelStream()
                .filter((e) -> e.getStatus().equals(Employee.Status.FREE))
                .findAny();
            System.out.println(any.get());
        }
        @Test
        public void test3(){
            //返回流中元素总个数
            long count = emps.stream()
                .filter((e) -> e.getStatus().equals(Employee.Status.FREE))
                .count();
            System.out.println(count);
            System.out.println("---------------------");
            
            //返回流中最大值
            Optional<Double> max = emps.stream()
                .map(Employee::getSalary)
                .max(Double::compare);
            System.out.println(max.get());
            System.out.println("--------------------");
            
            //返回流中最小值
            Optional<Double> min = emps.stream()
                .map(Employee::getSalary)
                .min(Double::compare);
            System.out.println(min.get());
        }
        /** 
        * 注意:
        *  流进行了终止操作后,不能再使用,会报错
        */  
        @Test
        public void test4(){
            Stream<Employee> stream = emps.stream()
                .filter((e) -> e.getStatus().equals(Employee.Status.FREE));
                
            //终止stream流 
            long count = stream.count();
            //再用一遍stream流,会发现报错
            stream.map(Employee::getSalary)
                .max(Double::compare);
        }
    }
    

    注意:流进行了终止操作后,不能再使用,会报错

    归约

    方法描述
    reduce(T iden,BinaryOperator b)可以将流中元素反复结合起来,得到一个值。
    reduce(BinaryOperator b)可以将流中元素反复结合起来,得到一个值。返回Optional

    注意:map和reduce的连接通常称为map-reduce模式,因Google用它来进行网络搜索而出名

    List<Employee> emps = Arrays.asList(
    new Employee(102, "李四", 79, 6666.66, Employee.Status.BUSY),
    new Employee(101, "张三", 18, 9999.99, Employee.Status.FREE),
    new Employee(103, "王五", 28, 3333.33, Employee.Status.VOCATION),
    new Employee(104, "赵六", 8, 7777.77, Employee.Status.BUSY),
    new Employee(104, "赵六", 8, 7777.77, Employee.Status.FREE),
    new Employee(104, "赵六", 8, 7777.77, Employee.Status.FREE),
    new Employee(105, "田七", 38, 5555.55, Employee.Status.BUSY));
    //终止操作
    /**
    * 归约
    * reduce(T identity,BinaryOperator) / reduce(BinaryOperator)可以将流中元素反复结合起来,得到一个值
    */
    @Test
    public void test1(){
        List<Integer> list = Arrays.asList(1,2,3,4,5,6,7,8,9,10);
        //求和操作
        //reduce中参数,第一个值,初始值,之后x就是0,y是集合中的第一个值
        //之后做相加的操作,得到的值又作为x的值,再取集合中第二个值作为y,求和
        //以此类推
        Integer sum = list.stream()
           .reduce(0, (x, y) -> x + y);
        System.out.println(sum);
        System.out.println("-------------------");
        
        //对Employee的salary列求和
        //返回的值是Java8的新特性,防止空异常
        //map指定要操作的列,reduce指定要进行的操作,这里写的是求和操作
        Optional<Double> op = emps.stream()
            .map(Employee::getSalary)
            .reduce(Double::sum);
            
        System.out.println(op.get());
    }
    //需求:搜索名字中"六"出现的次数
    @Test
    public void test2(){
        /** 
        * emps.stream().map(Employee::getName) 具体看map讲解,这里可以理解拿到Employee的name值,所有的,返回一个流
        * .flatMap(TestStreamAPI4::filterCharacter)即对上面操作生成的名字的流做了处理,取出字符串中的字符,最终返回一个Character流
        * .map((ch) -> {再对character流进行处理,将每个字符和六比较,有就返回1,没有就返回0,这样会得到一个包含所有六次数的Integer流,可以想象成返回一个数组那样,给下一步处理
        * .reduce(Integer::sum)最后再对这个Integer流做求和处理
        */ 
        Optional<Integer> optional = emps.stream()
            .map(Employee::getName)
            .flatMap(TestStreamAPI4::filterCharacter)
            .map((ch) -> {
                if (ch.equals('六')) {
                    return 1;
                } else {
                    return 0;
                }
            }).reduce(Integer::sum);
        System.out.println(optional.get());
    }
    
    /**
    * 自定义方法:接收一个字符串 
    * 取出字符串中的字符,添加至list集合中
    * 返回list集合的stream流 
    */
    public static Stream<Character> filterCharacter(String str){
        List<Character> list = new ArrayList<>();
            for (Character ch : str.toCharArray()){
            list.add(ch);
        }
        return list.stream();
    }
    

    收集

    方法描述
    collect(Collector c)将流转换为其他形式。接收一个Collector接口的实现,用于给Stream中元素
    • Collector接口中方法的实现决定了如何对流执行收集操作(如收集到List、Set、Map)。但是Collectors实用类提供了很多静态方法,可以方便地创建常见收集器实例,具体方法与实例如下表:
    方法返回类型作用
    toListList把流中元素收集到List:List<Employee> emps = list.stream().collect(Collectors.toList());
    toSetSet把流中元素收集到Set:Set<Employee> emps = list.stream().collect(Collectiors.toSet());
    toCollectionCollection把流中元素收集到创建的集合:Collection<Employee> emps = list.stream().collect(Collectors.toCollection(ArrayList::new));
    countingLong计算流中元素的个数:long count = list.stream.collect(Collectors.counting());
    summingIntInteger对流中元素的整数属性求和:int total = list.stream().collect(Collectors.summingInt(Employee::getSalary));
    averagingIntDouble计算流中元素Integer属性的平均值:double avg = list.stream().collect(Collectors.averagingInt(Employee::getSalay));
    summarizingIntIntSummaryStatistics收集流中Integer属性的统计值。如:平均值:IntSummaryStatiscs iss = list.stream().collect(Collectiors.summarizingInt(Empliyee::getSalary));
    joiningString连接流中每个字符串:String str = list.stream().map(Employee::getName).collect(Collectors.joining());
    maxByOptional根据比较器选择最大值:Optional<Emp> max = list.stream().collect(Collectors.maxBy(comparingInt(Employee::getSalay)));
    minByOptional根据比较器选择最小值:Optional<Emp> min = list.stream().collect(Collectors.minBy(ComparingInt(Employee::getSalary)));
    reducing归约产生的类型从一个作为累加器的初始值开始,利用BinaryOperator与流中元素逐个结合,从而归约成单个值。int total = list.stream.collect(Collectors.reducing(0,Employee::getSalary,Integer::sum));
    collectingAndThen转换函数返回的类型包裹另一个收集器,对其结果转换函数:int how=list.stream().collect(Collectors.collectingAndThen(Collectors.toList(),List::size));
    groupingByMap<K,List>根据某属性值对流分组,属性为K,结果为V:Map<Emp.Status,List<Emp>> map = list.stream().collect(Collectors.groupingBy(Employee::getStatus));
    partitioningByMap<Boolean,List>根据true或false进行分区:Map<Boolean,List<Emp>> vd = list.stream().collect(Collectors.partitioningBy(Employee::getManage));
    //collect将流转换为其他形式。接收一个Collector接口的实现,用于给Stream中元素做汇总的方法
    @Test
    public void test3(){
    //将name属性所有值转成list集合
    List<String> list = emps.stream()
        .map(Employee::getName)
        .collect(Collectors.toList());
    list.forEach(System.out::println);
    System.out.println("--------------------");
    
    //将name属性所有值转成set集合
    Set<String> set = emps.stream()
        .map(Employee::getName)
        .collect(Collectors.toSet());
    set.forEach(System.out::println);
    System.out.println("-------------------------");
    
    //将name属性所有值转成指定的集合类型,这里指定HashSet
    HashSet<String> hashSet = emps.stream()
        .map(Employee::getName)
        .collect(Collectors.toCollection(HashSet::new));
    hashSet.forEach(System.out::println);
    }
    
    @Test
    public void test4(){
        //求工资最大值
        Optional<Double> max = emps.stream()
            .map(Employee::getSalary)
            .collect(Collectors.maxBy(Double::compare));
        System.out.println(max.get());
        System.out.println("-----------------------");
        //求工资最小
        Optional<Employee> min = emps.stream()
            .collect(Collectors.minBy((e1, e2) -> Double.compare(e1.getSalary(), e2.getSalary())));
        System.out.println(min.get());
        System.out.println("------------------------");
        //求工资和
        Double sum = emps.stream()
            .collect(Collectors.summingDouble(Employee::getSalary));
        System.out.println(sum);
        System.out.println("-----------------------");
    
        Double avg = emps.stream()            
            .collect(Collectors.averagingDouble(Employee::getSalary));
        System.out.println(avg);
        Long count = emps.stream()
            .collect(Collectors.counting());
        System.out.println(count);    
        System.out.println("--------------------------------------------");
    
        DoubleSummaryStatistics dss = emps.stream()            
            .collect(Collectors.summarizingDouble(Employee::getSalary));
        System.out.println(dss.getMax());
    }
    
    //分组
    @Test
    public void test5(){
        //按状态分组
        Map<Employee.Status, List<Employee>> map = emps.stream()
            .collect(Collectors.groupingBy(Employee::getStatus));
        System.out.println(map);
    }
    
    //多级分组
    @Test
    public void test6(){
        Map<Employee.Status, Map<String, List<Employee>>> map = emps.stream()
            .collect(Collectors.groupingBy(Employee::getStatus, Collectors.groupingBy((e) -> {
                if (e.getAge() >= 60) {
                    return "老年";
                } else if (e.getAge() >= 35) {
                    return "中年";
                } else {
                    return "成年";
                }
            }
        )));
        System.out.println(map);
    }
    
    //分区
    @Test
    public void test7(){
        Map<Boolean, List<Employee>> map = emps.stream()
            .collect(Collectors.partitioningBy((e) -> e.getSalary() >= 5000));
        System.out.println(map);
    }
    
    //连接流中字符串
    @Test
    public void test8(){
        String collect = emps.stream()
            .map(Employee::getName)
            //第一个参数指定参数间的连接字符,第二个参数指定首的连接符,第三个参数指定尾的连接符。二三参数可以不指定
            .collect(Collectors.joining(",", "---", "---"));
        System.out.println(collect);
    }
    
    @Test
    public void test9(){
        Optional<Double> sum = emps.stream()
            .map(Employee::getSalary)
            .collect(Collectors.reducing(Double::sum));
        System.out.println(sum.get());
    }
    

    并行流与串行流

    • 并行流就是把一个内容分成多个数据块,并用不同的线程分别处理每个数据块的流。
    • Java8中将并行进行了优化,可以很容易的对数据进行并行操作。Stream API可以声明性地通过parallel()sequential()在并行流与顺序流之间进行切换。

    了解Fork/Join框架

    • Fork/Join框架:就是在必要的情况下,将一个大任务,进行拆分(fork)成若干个小任务(拆到不可再拆时),再将一个个的小任务运算的结果进行join汇总。

    [外链图片转存失败(img-o0WWXMIy-1563864715861)(en-resource://database/550:1)]

    Fork/Join框架与传统线程池的区别

    • 采用工作窃取模式(work-stealing):
      • 当执行新的任务时,它可以将其拆分成更小的任务执行,并将小任务加到线程队列中,然后再从一个随机线程的队列中偷一个并把它放在自己的队列中。
    • 相对于一般的线程池实现,fork/join框架的优势体现在对其中包含的任务的处理方式上。在一般线程池中,如果一个线程正在执行的任务由于某些原因无法继续运行,那么该线程会处于等待状态。
    • 而在fork/join框架实现中,如果某个子问题由于等待另外一个子问题的完成而无法继续运行,那么处理该子问题的线程会主动寻找其他尚未运行的子问题来执行,这种方式减少了线程的等待时间,提高了性能。
    //继承RecursiveTask类,自己实现Fork/Join,其实就是写算法,如何拆分子任务
    
    package com.wangwren.stream;
    import java.util.concurrent.RecursiveTask;
    /**
    * @author: wangwren
    * @date: 2019/4/6
    * @descripton: 要计算0至一亿的和,自己先使用fork/join实现一下
    *                   RecursiveTask是带有返回值的,RecursiveAction不带有返回值
    *                  Recursive的意思是“递归”
    * @version: 1.0
    */
    public class ForkJoinCalcuate extends RecursiveTask<Long> {
        private long start;
        private long end;
        
        //临界值,设为一万,即小任务中包含一万个数
        private static final long THRESHOLD = 10000L;
        public ForkJoinCalcuate(long start,long end){
            this.start = start;
            this.end = end;
        }
    
        @Override
        protected Long compute() {
            long length = end - start;
            if (length <= THRESHOLD){
                long sum = 0; 
                //循环相加
                for (long i = start;i <= end;i++){
                    sum += i;
                }
                return sum;
            }else{
                //对任务进行拆分
                long middle = (start + end) / 2;
                ForkJoinCalcuate left = new ForkJoinCalcuate(start,middle);
                //拆分,并将该子任务压入线程队列
                //fork是ForkJoinTask提供的方法
                left.fork();
                ForkJoinCalcuate right = new ForkJoinCalcuate(middle + 1,end);
                right.fork();
                //合并
                return left.join() + right.join();
            }
        }
    }
    
    • 测试
    package com.wangwren.stream;
    import org.junit.Test;
    import java.util.concurrent.ForkJoinPool;
    import java.util.concurrent.ForkJoinTask;
    import java.util.stream.LongStream;
    /**
    * @author: wangwren
    * @date: 2019/4/6
    * @descripton:
    * @version: 1.0
    */
    public class ForkJoinTest {
        /**
        * 检验自己实现的fork/join
        *
        * test1与test2相比,在一亿个数的情况下,2的时间短,所以fork/join应该使用在数量级更大的情况
        * 此时增加数量级
        */
        @Test
        public void test1(){
            long startTime = System.currentTimeMillis();
            //创建一个Fork/Join池
            ForkJoinPool pool = new ForkJoinPool();
            ForkJoinTask<Long> task = new ForkJoinCalcuate(0,10000000000L);
            //执行任务
            Long sum = pool.invoke(task);
            System.out.println(sum);
            long endTime = System.currentTimeMillis();
            System.out.println("耗费时间:" + (endTime - startTime));
        }
        
        /**
        * 使用普通for循环方式来计算,比较二者时间
        */ 
        @Test
        public void test2(){
            long startTime = System.currentTimeMillis();
            long sum = 0L;
            for (long i = 0 ; i <= 10000000000L ; i ++ ){
                sum += i;
            }
            System.out.println(sum);
            long endTime = System.currentTimeMillis();
            System.out.println("消耗时间:" + (endTime - startTime));
        }
        
        /**
        * Java8提供的并行流
        */ 
        @Test
        public void test3(){
            long startTime = System.currentTimeMillis();
            long sum = LongStream.rangeClosed(0, 10000000000L)
                                //使用并行流
                                .parallel()
                                .sum();
            System.out.println(sum);
            long endTime = System.currentTimeMillis();
            System.out.println("消耗时间:" + (endTime - startTime));
        }
    }
    

    最后

    这里有一个简单的并行处理案例

    // 使用一个容器装载 100 个数字,通过 Stream 并行处理的方式将容器中为单数的数字转移到容器 parallelList
    List<Integer> integerList= new ArrayList<Integer>();
    
    for (int i = 0; i <100; i++) {
          integerList.add(i);
    }
    
    List<Integer> parallelList = new ArrayList<Integer>() ;
    integerList.stream()
               .parallel()
               .filter(i->i%2==1)
               .forEach(i->parallelList.add(i));
    
    • 上面代码的问题:最后parallelList集合中的值有可能有null或缺值。
    • 因为ArrayList集合不是线程安全的,上面代码使用并行流,最后循环遍历在parallelList添加属性。
    • 例如线程1在size++后准备给index为size+1的位置赋值,这个时候第二个线程又给size++,这个线程1赋值的index就变成了size+2,在线程1赋值后,线程2又在size+2的位置赋值。这样的结果就是size+1的位置没有值null,size+2的位置为线程2赋的值,线程1赋的值被覆盖
    • 正确的方式应该是使用collect()。关于collect(),文章中已经提到过了,可以上翻看一下,是终止操作里的,可以使用collect()重新生成一个List集合。

    为什么网上有些说法做测试用lambda比普通for循环速度慢五倍?

    当应用程序以前没有使用lambda表达式时,会动态生成lambda目标对象,这是导致慢的实际原因。
    虽然单独使用lambda表达式在初次运行时要比传统方式慢很多,但结合stream的并行操作,在多核环境下还有有优势的。

    展开全文
  • java8新特性,Stream流操作大全之串行流Stream流简介一、ForEach测试二、ForEach测试 Stream流简介 一、ForEach测试 Stream 提供了新的方法 ‘forEach’ 来迭代流中的每个数据。 //测试 forEach 迭代流中的数据, ...
  • JDK1.8新特性【之】串行流、并行流、工作窃取模式(Fork/Join) 1.串行流、并行流 2.工作窃取模式( Fork/Join) 3.测试 4.完整源码 《目录:Java基础》 《目录:JDK1.8新特性》 《幕》 1.串行流、并行流 串行流:为...
  • 并行就是把一个内容分成多个数据块,并用不同的线程分别处理每个数据块的。Java8中将并行进行了优化,我们可以很容易的对数据进行并行操作。Stream API可以声明性地通过parallel()和sequential()在并行和顺序...
  • 并行就是把一个内容分成多个数据块,并用不同的线程分别处理每个数据块的。 Java 8 中将并行进行了优化,我们可以很容易的对数据进行并行操作。Stream API 可以声明性地通过 parallel() 与sequential() 在并行...
  • Java流式操作Stream(5) 串行流与并行流性能大比拼 package com.lius.stream; import java.util.List; import java.util.UUID; import java.util.concurrent.TimeUnit; import java.util.function.BiFunction; ...
  • JDK1.8(二)---Stream串行流和并行流详解

    千次阅读 2020-09-25 15:12:40
    串行流 一、执行机制 基于pipeline(管道) 二、流的特性 stream不存储数据 stream不改变数据源 stream不可重复使用 stream串行执行 上个节点会影响下个节点 三、流的节点 中间节点(懒加载): filter、distinct ...
  • JDK8 | 串行流 Stream 与并行流 parallelStream 一、串行 Stream 流 1.获取串行流的两种方式: 所有的 Collection 集合都可以通过 stream 默认方法获取流:list.stream(); Stream 接口的静态方法 of 可以获取数组...
  • 在上一篇文章中我们知道通过parallelStream方法可以获得一个并行,那么什么是并行呢?并行就是把内容分割成多个数据块,每个数据块对应一个,然后用多个线程分别处理每个数据块中的。 java8中将并行进行...
  • Stream 是 Java8 中处理集合的关键抽象概念,它可以指定你希望对集合进行的操作,可以执行非常复杂的查找、过滤和映射数据等操作。使用Stream API 对集合数据进行操作,就类似于使用 SQL 执行的数据库查询。...
  • 【JDK8新特性】5.并行流和串行流

    千次阅读 2017-03-27 18:29:18
    并行流和串行流 基于尚硅谷java8教程 1. 并行流和串行流的介绍为了适应目前多核机器的时代,提高系统CPU、内存的利用率,在jdk1.8新的stream包中针对集合的操作也提供了并行操作流和串行操作流。并行流就是把内容...
  • JAVA8新特性[第五季]-并行流与串行流

    千次阅读 2017-08-20 22:16:14
    一什么是并行 二了解 ForkJoin框架 三ForkJoin 框架与传统线程池的区别 四 案例 1 java8之前 ForkJoin的计算 2 使用普通for 循环 3 java8中 ForkJoin计算 一、什么是并行 并行 : 就是把一个内容分成...
  • package com.lgx.jdk8.part02; import java.util.ArrayList; import java.util.Date; import java.util.List; import java.util.UUID;...import java.util.concurrent.TimeUnit;... * 串行Stream和并行(parallel)Stream
  • 并行流和串行流 基于尚硅谷java8教程 1. 并行流和串行流的介绍 为了适应目前多核机器的时代,提高系统CPU、内存的利用率,在jdk1.8新的stream包中针对集合的操作也提供了并行操作流和串行操作流。并行流就是把内容...
  • 而在Java8中,对于并行流和串行流同样做了大量的优化。对于并行流和串行流的知识,也是在面试过程中,经常被问到的知识点。当然,我们不能只是为了应付面试来学习这些知识,更重要的是将这些知识运用到实际的工作中...
  • Java8——串行流与并行流

    千次阅读 2019-04-04 14:42:10
    并行  并行就是把一个内容分成多个数据块,并用不同的线程分别处理每个数据块的。Java 8 中将并行进行了优化,我们可以很容易的对数据进行并行操作。Stream API 可以声明性地通过 parallel() 与 sequential()...
  • 串行Stream和并行Stream

    千次阅读 2020-01-07 11:14:14
    串/并行Stream package com.zenqgifeng.practicedemo.jdk8newproperties; import org.junit.After; import org.junit.Before; import org.junit.Test; import java.util.ArrayList; import java.util....
  • JAVA8新特性之并行流与串行流

    千次阅读 2018-10-14 11:50:50
    一:简介       二:实例说明  1:计算0-10亿的和,我们比较使用fork/join和普通for循环的花费时间?        效果:    普通for循环:    ...
  • 基于FPGA的高速串行接收器
  • 并行parallelStream注意事项 1、parallelStream是线程不安全的 2、parallelStream适用的场景是CPU密集型的,只是做到别浪费CPU,假如本身电脑CPU 的负载很大,那还到处用并行,那并不能起到作用 3、I/O密集型 ...
  • 我们在串行通讯处理中,常常看到RTS/CTS和XON/XOFF这两个选项,这就是两个控制的选项,目前控制主要应用于调制解调器的数据通讯中,但对普通RS232编程,了解一点这方面的知识是有好处的。那么,控制在串行通讯...
  • 在各种基于PCM30/32路一次群系统、能够接入公共电话通信网的专用汇接调度设备中,目前广泛采用的设计方式为利用MCU控制多种专用集成电路(ASIC)协同工作,完成对语音调度数据的接收、叠加、分组交换等操作,此类设备...
  • Stream的串行和并行

    2022-01-15 20:16:11
    sequential 返回的串行处理(默认就是,可以不写) parallel返回的是并行处理,参考如下测试用例: @Test public void test12() throws Exception { IntStream intStream = IntStream.of(6, 1, 1, 2, 5, ...
  • 前为串行流,后为并行流) 1.共200000000条数据 分为200000000个组 耗时比较:WC,半天没跑出来,建议不用再内存中分特大量数据。不建议使用 2.共2000000条数据 分为2000000个组 3. 共2000000条数据 分为200个组 ...
  • 引言程序运行的方式可以分为三种:串行(Sequential)、并行(Parallel)、并发(Concurrent)。串行是最一般的情况,程序会按顺序执行每个任务,效率往往十分低下。与之相对的是并行,多个任务会同时运行在不同的cpu线程...

空空如也

空空如也

1 2 3 4 5 ... 20
收藏数 101,314
精华内容 40,525
关键字:

串行流