介绍了 Java 中的 CompletableFuture同步与异步的实现

209 阅读37分钟

介绍了 Java 中的 CompletableFuture 异步编排。先阐述了同步和异步概念,指出使用异步编排的原因。接着详细讲解了 CompletableFuture 的学习,包括多种方法及对比。然后通过实战案例展示其应用,最后说明了异步编排的使用场景,如并行调用微服务、批量处理任务等,强调其在优化性能和处理复杂流程中的作用。

一、写在开头 我们先给出同步和异步的概念

同步:同步编程指的是程序在执行某个任务时,会阻塞当前线程,直到任务完成。在这种模式下,后续的代码会等待任务完成之后再继续执行。 异步:异步编程指的是程序在执行某个任务时,不会阻塞当前线程,而是将任务交给其他线程去执行,当前线程可以继续执行其他操作。任务完成后,会通过回调、通知等方式处理结果。 二、使用异步编排的原因 问题举例 查询商品详情页的逻辑非常复杂,此时数据的获取涉及到多个RPC远程调用,那么必然需要花费更多的时间。假如商品详情页的查询。

由图,用户需要3.5s后才能看到商品详情页的内容。很显然是不能接受的。如果有多个线程同时完成这4步操作,也许只需要1.5s即可完成响应。 在这里需要注意的是,在将这四个任务异步化之后,需要注意的是这四个任务之间的联系,比如获取用户的基本信息这个任务,我们需要获取商品的分类信息执行完返回的结果传入才能执行,这时候,我们就必须保证这两个任务之间的排序问题,怎么解决呢?请看下面。 Future Java在JDK1.5之后引入了JUC包,里面包含了一个接口:Future,这算是Java中实现异步编程的开山鼻祖, 然而,Future 的局限性在于它的功能相对简单,无法很好地处理复杂的异步任务链。Future 的局限性在这里给出,有兴趣的朋友可以具体去了解,这里不重点说Future。

阻塞获取结果:future.get() 方法是阻塞的,无法在不阻塞的情况下处理结果。 缺乏组合功能:无法轻松地组合多个异步任务,例如任务链、并行任务等。 异常处理复杂:异常处理不够简洁,需要手动捕获并处理异常。 CompletableFuture 随着 Java 版本的演进,CompletableFuture** **在 JDK 8 中引入,提供了更强大和灵活的异步编程支持。它不仅可以用来表示异步计算的结果,还提供了许多方便的方法来处理异步任务的执行和结果处理。以下是 CompletableFuture 的一些主要用途:

异步计算:CompletableFuture 可以表示一个异步计算的结果,允许在计算完成后继续执行其他操作。例如,CompletableFuture.supplyAsync 可以异步执行一个任务并返回结果。 非阻塞操作:与传统的 Future 需要使用 get 方法阻塞等待结果不同,CompletableFuture 提供了非阻塞的方法,例如 thenApply、thenAccept 和 thenRun,允许在计算完成后执行回调函数。 组合多个异步任务:CompletableFuture 提供了方法来组合多个异步任务,例如 thenCombine、thenCompose 和 allOf 等,允许对多个异步任务进行组合操作。 处理异常:CompletableFuture 提供了方法来处理异步计算中的异常,例如 exceptionally 和 handle。 构建复杂的异步流:通过链式调用,CompletableFuture 允许构建复杂的异步流,简化异步编程模型,提高代码的可读性和可维护性。 三、CompletableFuture学习 下面我们在具体学习一下CompletableFuture的使用

  1. runAsync 与 supplyAsync runAsync:runAsync 方法用于启动一个没有返回值的异步任务。该方法通常用于那些不需要返回结果的任务,例如记录日志、发送通知等。 supplyAsync :supplyAsync 方法用于启动一个有返回值的异步任务。该方法通常用于需要返回结果的任务,例如计算结果、获取数据等。
public class Demo01 {
    public static void main(String[] args) throws Exception { 
        supplyAsync();
        System.out.println("main来了"); 
        SleepUtils.sleep(3); 
    } 
    //发起一个异步请求 
    public static void runAsync() {
    CompletableFuture.runAsync(new Runnable() { 
        @Override 
        public void run() { 
           System.out.println(Thread.currentThread().getName()+"你好runAsync"); 
           SleepUtils.sleep(10); 
           } 
        }); 
    } 
    //发起一个异步请求 
    public static void supplyAsync() throws Exception { 
            CompletableFuture supplyFuture = CompletableFuture.supplyAsync(new Supplier() { 
      @Override 
    public String get() { 
            System.out.println(Thread.currentThread().getName() + "你好supplyAsync"); 
            SleepUtils.sleep(2); 
            return "java0518"; 
            } 
    });
    //这是一个阻塞方法
    System.out.println(Thread.currentThread().getName()+"--->:"+supplyFuture.get());
    }

} 

CompletableFuture 的 get() 方法是一个阻塞方法,因为它会等待异步任务的完成并返回结果。如果异步任务尚未完成,调用 get() 的线程会被阻塞,直到任务完成或抛出异常。

2.whenComplete 与 exceptionally whenComplete 类似于 Vue 中发起异步请求之后的 then 方法。 无论任务是否有异常都会执行。 回调方法接收两个参数:任务的结果(如果任务没有返回值则为 Void)和异常(如果没有异常则为 null)。 exceptionally 类似于 Vue 中发起异步请求之后的 catch 方法。 只有当任务发生异常时才会执行。 可以用于处理异步任务中的异常,并返回一个替代结果。 public class Demo02 {

public static void main(String[] args) throws Exception {
runAsync();
    System.out.println("main来了");
    SleepUtils.sleep(3);
}
//发起一个异步请求
public static void runAsync() {
    CompletableFuture.runAsync(new Runnable() {
    @Override
    public void run() {
    System.out.println(Thread.currentThread().getName()+"你好runAsync");
    //int a =10/0;
    }
}).whenComplete(new BiConsumer() {
    @Override
    public void accept(Void acceptVal, Throwable throwable) {
        System.out.println("执行异步之后whenComplete接受值"+acceptVal);
        System.out.println("执行异步之后whenComplete异常值"+throwable);
    }
}).exceptionally(new Function() {
    @Override
    public Void apply(Throwable throwable) {
        System.out.println("执行异步之后exceptionally异常值"+throwable);
        return null;
        }
    });
}

} 3.whenComplete 和 whenCompleteAsync whenComplete(同步):

用途:用于处理任务完成后的回调,无论任务是否成功或失败。 执行线程:在发起异步任务的线程中执行。 whenCompleteAsync(异步):

用途:用于处理任务完成后的回调,无论任务是否成功或失败。 执行线程:在异步线程池中执行,通常不会阻塞发起异步任务的线程。 public class Demo03 {

public static void main(String[] args) throws Exception {
//runAsync1();
    runAsync2();
    System.out.println("main来了");
    SleepUtils.sleep(3);
}
//发起一个异步请求
public static void runAsync1() {
    CompletableFuture.runAsync(new Runnable() {
        @Override
        public void run() {
            System.out.println(Thread.currentThread().getName()+"你好runAsync");
        }
    }).whenComplete(new BiConsumer() {
        @Override
        public void accept(Void acceptVal, Throwable throwable) {
            System.out.println(Thread.currentThread().getName()+"异步之后接受值"+acceptVal);
            }
        });
}

//发起一个异步请求
public static void runAsync2() {
CompletableFuture.runAsync(new Runnable() {
    @Override
    public void run() {
        System.out.println(Thread.currentThread().getName()+"你好runAsync");
    }
    }).whenCompleteAsync(new BiConsumer() {
    @Override
    public void accept(Void acceptVal, Throwable throwable) {
        System.out.println(Thread.currentThread().getName()+"执行异步之后async接受值"+acceptVal);
    }
    });
}

} 4.thenAccept 和 thenApply thenAccept:用于处理异步任务的结果,但不返回新的值。适合用于打印日志、执行操作等场景。 thenApply:用于处理异步任务的结果,并返回新的值。适合用于转换数据、链式处理等场景。 public class Demo04 {

public static void main(String[] args) throws Exception {
    supplyAsync();
    System.out.println("main来了");
    SleepUtils.sleep(8);
}
//发起一个异步请求
public static void supplyAsync() throws Exception {
    CompletableFuture supplyFuture = CompletableFuture.supplyAsync(new Supplier() {
    @Override
    public String get() {
        System.out.println(Thread.currentThread().getName() + "你好supplyAsync");
        SleepUtils.sleep(2);
        return "java0518";
        }
    });

    supplyFuture.thenAccept(new Consumer() {
    @Override
    public void accept(String acceptVal) {
        SleepUtils.sleep(2);
        System.out.println(Thread.currentThread().getName()+"第一个accept接受到的值"+acceptVal);
    }
    });

supplyFuture.thenAccept(new Consumer() {
    @Override
    public void accept(String acceptVal) {
        SleepUtils.sleep(2);
        System.out.println(Thread.currentThread().getName()+"第二个accept接受到的值"+acceptVal);
        }
    });
}

}

public class Demo05 {


    public static void main(String[] args) throws Exception {
        supplyAsync();
        System.out.println("main来了");
        SleepUtils.sleep(8);
    }
    //发起一个异步请求
    public static void supplyAsync() throws Exception {
        CompletableFuture supplyFuture = CompletableFuture.supplyAsync(new Supplier() {
            @Override
            public String get() {
                System.out.println(Thread.currentThread().getName() + "你好supplyAsync");
                SleepUtils.sleep(2);
                return "java0518";
            }
    });

CompletableFuture thenApply1 = supplyFuture.thenApply(new Function() {
    @Override
    public String apply(String acceptVal) {
        SleepUtils.sleep(2);
        System.out.println(Thread.currentThread().getName() + "第一个thenApply接受到的值" + acceptVal);
        return "apply1" + acceptVal;
    }
});

CompletableFuture thenApply2 = supplyFuture.thenApply(new Function() {
@Override
    public String apply(String acceptVal) {
        SleepUtils.sleep(2);
        System.out.println(Thread.currentThread().getName() + "第二个thenApply接受到的值" + acceptVal);
        return "apply2" + acceptVal;
    }
});

    System.out.println(thenApply1.get());
    System.out.println(thenApply2.get());
}


}

5.thenApply 和 thenApplyAsync thenApply:

使用调用它的 CompletableFuture 的同一个线程或完成该 CompletableFuture 的线程来执行处理函数。 如果前面的阶段已经完成,处理函数可能会在调用线程中被同步执行。 适用于对执行时间要求不严格且处理时间较短的任务。 thenApplyAsync:

使用 ForkJoinPool.commonPool() 或者自定义的线程池来异步执行处理函数。

总是异步地执行处理函数,不管前面的阶段是否已经完成。

适用于需要异步执行、处理时间较长或需要非阻塞执行的任务。

执行上下文:thenApply 在同一个线程或调用线程中同步执行,而 thenApplyAsync 总是异步地执行,使用公共线程池或自定义的线程池。

适用场景:thenApply 适用于对执行时间要求不严格的短任务,thenApplyAsync 适用于需要非阻塞异步执行的长任务或需要使用特定线程池的任务。

public class Demo06 {

public static void main(String[] args) throws Exception {
    supplyAsync();
    System.out.println("main来了");
    SleepUtils.sleep(8);
}

//发起一个异步请求
public static void supplyAsync() throws Exception {
    CompletableFuture supplyFuture = CompletableFuture.supplyAsync(new Supplier() {
    @Override
    public String get() {
        System.out.println(Thread.currentThread().getName() + "你好supplyAsync");
        SleepUtils.sleep(2);
        return "java0518";
    }
});

CompletableFuture thenApply1 = supplyFuture.thenApplyAsync(new Function() {
    @Override
    public String apply(String acceptVal) {
        SleepUtils.sleep(2);
        System.out.println(Thread.currentThread().getName() + "第一个thenApply接受到的值" + acceptVal);
        return "apply1" + acceptVal;
    }
});

CompletableFuture thenApply2 = supplyFuture.thenApplyAsync(new Function() {
@Override
    public String apply(String acceptVal) {
        SleepUtils.sleep(2);
        System.out.println(Thread.currentThread().getName() + "第二个thenApply接受到的值" + acceptVal);
        return "apply2" + acceptVal;
    }
});

System.out.println(thenApply1.get());
System.out.println(thenApply2.get());
}

}

6.总结运用 对于不需要返回结果的任务,使用 runAsync。 对于需要返回结果的任务,使用 supplyAsync。 在任务完成后,无论是否成功,都要执行某些操作时,使用 whenComplete 或 whenCompleteAsync。 仅在任务发生异常时处理异常并提供替代结果,使用 exceptionally。 处理任务结果但不返回新值时,使用 thenAccept。 处理任务结果并返回新值时,使用 thenApply 或 thenApplyAsync。根据是否需要异步执行选择同步或异步版本。 带Async代表异步,异步就是启动另外线程去执行。有xxpply的就代表有返回值

public class Demo07 {

public static void main(String[] args) throws Exception {
    supplyAsync();
    System.out.println("main来了");
    SleepUtils.sleep(8);
}

//发起一个异步请求
public static void supplyAsync() throws Exception {
    CompletableFuture supplyFuture = CompletableFuture.supplyAsync(()->{
        System.out.println(Thread.currentThread().getName() + "你好supplyAsync");
        SleepUtils.sleep(2);
        return "java0518";
});

CompletableFuture thenApply1 = supplyFuture.thenApplyAsync(acceptVal->{
    SleepUtils.sleep(2);
    System.out.println(Thread.currentThread().getName() + "第一个thenApply接受到的值" + acceptVal);
    return "apply1" + acceptVal;
});

CompletableFuture thenApply2 = supplyFuture.thenApplyAsync(acceptVal -> {
    SleepUtils.sleep(2);
    System.out.println(Thread.currentThread().getName() + "第二个thenApply接受到的值" + acceptVal);
    return "apply2" + acceptVal;
});

System.out.println(thenApply1.get());
System.out.println(thenApply2.get());
}

}

四、异步编排实战案例 我们对开头的例子运用线程池+CompletableFuture进行模拟编程 在这里假设

获取商品分类信息依赖于获取商品统计信息的查询结果 获取商品基本信息也依赖于获取商品统计信息的查询结果

import java.util.concurrent.CompletableFuture; import java.util.concurrent.ExecutionException; import java.util.concurrent.Executors; import java.util.concurrent.ThreadPoolExecutor; import java.util.concurrent.TimeUnit;

public class AlbumDetailsDemo {


    public static void main(String[] args) throws ExecutionException, InterruptedException {
      // 创建一个线程池
      ThreadPoolExecutor executor = (ThreadPoolExecutor) Executors.newFixedThreadPool(4);

      // 开始时间
      long startTime = System.currentTimeMillis();

    // 1. 获取商品的基本信息
      CompletableFuture basicInfoFuture = CompletableFuture.runAsync(() -> {
      sleep(1.5);//模拟远程调用feign
    }, executor);

        // 2. 获取商品统计信息
        CompletableFuture statsInfoFuture = CompletableFuture.supplyAsync(() ->  {
        sleep(0.5);//模拟远程调用feign
        return "商品统计信息";
        }, executor);

        // 3. 获取商品分类信息 依赖于2的查询结果
        CompletableFuture categoryInfoFuture = statsInfoFuture.thenAcceptAsync(statsInfoFutureInfo ->  {
        System.out.println("拿到商品统计信息"+statsInfoFutureInfo);
        sleep(1.0);//模拟远程调用feign
        }, executor);

        // 4. 获取商品基本信息 依赖于2的查询结果
        CompletableFuture userInfoFuture = statsInfoFuture.thenAcceptAsync(statsInfoFutureInfo -> {
        System.out.println("拿到商品统计信息"+statsInfoFutureInfo);
        sleep(0.5);//模拟远程调用feign
        }, executor);

        // 等待所有任务完成
        CompletableFuture.allOf(basicInfoFuture, statsInfoFuture, categoryInfoFuture, userInfoFuture).join();

        // 结束时间
        long endTime = System.currentTimeMillis();
        System.out.println("总耗时: " + (endTime - startTime) / 1000.0 + "秒");

        // 关闭线程池
        executor.shutdown();
    }

    // 模拟任务执行时间
    private static void sleep(double seconds) {
        try {
            TimeUnit.MILLISECONDS.sleep((long) (seconds * 1000));
        } catch (InterruptedException e) {
            Thread.currentThread().interrupt();
        }
    }
}

我们可以看到只需1.578秒就可以完成业务,比3.5秒的同步运行进行了大大优化。

五、异步编排使用场景 场景分析: 如果我们使用默认方式采用的是串行,整体访问需要更多的时间 如果我们单纯的使用创建多个线程的方式,无法保证线程执行顺序 假如请求线程太多,会占用大量的内存,利用线程复用,可以节约空间/性能开销 实际使用场景

  1. 并行调用多个微服务 在微服务架构中,一个请求可能需要调用多个微服务来获取数据并进行处理。例如,在电商平台中,获取商品详情页信息时需要调用库存服务、价格服务、评论服务等。
  2. 异步批量处理任务 在后台管理系统中,可能需要批量处理大量数据,例如批量导入用户数据,进行数据清洗和校验,并将结果写入数据库。

3.异步处理用户请求并返回聚合结果 在一个内容聚合平台中,需要从多个数据源获取数据并进行合并返回给用户。例如获取新闻、社交媒体帖子和博客文章。

  1. 异步执行复杂的工作流 在一些复杂的业务流程中,需要依次执行多个步骤,每个步骤可能是异步的。例如在订单处理流程中,需要检查库存、扣减库存、创建订单、处理支付等。

CompletableFuture

的异步编排:

1. 同步与异步编程的基本概念

  • 同步编程:指程序执行某个任务时,当前线程会被阻塞,直到任务完成。在这种模式下,后续代码需要等待前一个任务的完成。
  • 异步编程:在执行任务时,当前线程不会被阻塞,任务会交给其他线程来执行。任务完成后,通常通过回调或通知的方式来处理结果。

2. 使用异步编排的原因

  • 提高效率:在复杂的操作如商品详情页查询中,涉及多个远程调用(RPC),异步可以减少等待时间。例如,使用异步可以将响应时间从3.5秒减少到1.5秒。
  • 任务依赖管理:在异步化操作时,需要确保任务的依赖关系,例如在获取用户信息时可能需要先获取分类信息。

3. Future和CompletableFuture

  • Future的局限性

    • 结果获取方法

      future.get()

      是阻塞的。

    • 任务组合功能不足,难以处理复杂异步任务链。

    • 异常处理复杂。

  • CompletableFuture的优势

    • 支持非阻塞操作,并提供

      thenApply

      thenAccept

      等方法来执行后续操作。

    • 便捷的任务组合能力,如

      thenCombine

      allOf

    • 异常处理简洁,提供

      exceptionally

      等方法。

    • 可构建复杂的异步流程,提高代码可读性与维护性。

4. CompletableFuture的使用

  • 核心方法

    • runAsync

      :启动不需要返回值的异步任务,用于记录日志等。

    • supplyAsync

      :启动需要返回结果的异步任务,如计算或数据获取。

    • whenComplete

      exceptionally

      :处理任务完成及异常情况,相当于JavaScript中的then和catch。

    • thenApply

      thenAccept

      :前者处理结果并返回新值,后者处理结果但不返回新值。

    • Async后缀

      thenApplyAsync

      等总是异步执行,适合较长时间的任务。

5. 实战案例

  • 使用

    CompletableFuture

    和线程池并行处理商品信息的获取,提高处理速度。

6. 异步编排的应用场景

  • 并行调用微服务:如电商平台需要同时调用多个服务。
  • 异步批量任务处理:例如批量用户数据的导入和校验。
  • 用户请求的异步处理:从多个数据源获取并合并返回。
  • 复杂工作流执行:步骤多且需异步执行的业务流程。