Java CompletableFuture

场景说明

查询所有商店某个商品的价格并返回,并且查询商店某个商品的价格的API为同步 一个Shop类,提供一个名为getPrice的同步方法

  • 店铺类:Shop.java

    1. public class Shop {
    2. private Random random = new Random();
    3. /**
    4. * 根据产品名查找价格
    5. * */
    6. public double getPrice(String product) {
    7. return calculatePrice(product);
    8. }
    9. /**
    10. * 计算价格
    11. *
    12. * @param product
    13. * @return
    14. * */
    15. private double calculatePrice(String product) {
    16. delay();
    17. //random.nextDouble()随机返回折扣
    18. return random.nextDouble() * product.charAt(0) + product.charAt(1);
    19. }
    20. /**
    21. * 通过睡眠模拟其他耗时操作
    22. * */
    23. private void delay() {
    24. try {
    25. Thread.sleep(1000);
    26. } catch (InterruptedException e) {
    27. e.printStackTrace();
    28. }
    29. }
    30. }

    查询商品的价格为同步方法,并通过sleep方法模拟其他操作。这个场景模拟了当需要调用第三方API,但第三方提供的是同步API,在无法修改第三方API时如何设计代码调用提高应用的性能和吞吐量,这时候可以使用CompletableFuture

    CompletableFuture使用

    CompletableFuture接口的实现类,在JDK1.8中引入

  • **CompletableFuture**的创建:说明:

    • 两个重载方法之间的区别 => 后者可以传入自定义Executor,前者是默认的,使用的ForkJoinPool
    • supplyAsyncrunAsync方法之间的区别 => 前者有返回值,后者无返回值
    • Supplier是函数式接口,因此该方法需要传入该接口的实现类,追踪源码会发现在run方法中会调用该接口的方法。因此使用该方法创建CompletableFuture对象只需重写Supplier中的get方法,在get方法中定义任务即可。又因为函数式接口可以使用Lambda表达式,和new创建CompletableFuture对象相比代码会简洁不少
    • 使用new方法
      1. CompletableFuture<Double> futurePrice = new CompletableFuture<>();
  • 使用CompletableFuture#completedFuture静态方法创建

    1. public static <U> CompletableFuture<U> completedFuture(U value) {
    2. return new CompletableFuture<U>((value == null) ? NIL : value);
    3. }

    参数的值为任务执行完的结果,一般该方法在实际应用中较少应用

  • 使用 CompletableFuture#supplyAsync静态方法创建 supplyAsync有两个重载方法:

    1. //方法一
    2. public static <U> CompletableFuture<U> supplyAsync(Supplier<U> supplier) {
    3. return asyncSupplyStage(asyncPool, supplier);
    4. }
    5. //方法二
    6. public static <U> CompletableFuture<U> supplyAsync(Supplier<U> supplier,
    7. Executor executor) {
    8. return asyncSupplyStage(screenExecutor(executor), supplier);
    9. }
  • 使用CompletableFuture#runAsync静态方法创建 runAsync有两个重载方法

    1. //方法一
    2. public static CompletableFuture<Void> runAsync(Runnable runnable) {
    3. return asyncRunStage(asyncPool, runnable);
    4. }
    5. //方法二
    6. public static CompletableFuture<Void> runAsync(Runnable runnable, Executor executor) {
    7. return asyncRunStage(screenExecutor(executor), runnable);
    8. }
  • 结果的获取: 对于结果的获取CompltableFuture类提供了四种方式

    1. //方式一
    2. public T get()
    3. //方式二
    4. public T get(long timeout, TimeUnit unit)
    5. //方式三
    6. public T getNow(T valueIfAbsent)
    7. //方式四
    8. public T join()

    说明:
    示例:

    • get()get(long timeout, TimeUnit unit) => 在Future中就已经提供了,后者提供超时处理,如果在指定时间内未获取结果将抛出超时异常
    • getNow => 立即获取结果不阻塞,结果计算已完成将返回结果或计算过程中的异常,如果未计算完成将返回设定的valueIfAbsent
    • join => 方法里不会抛出异常

      1. public class AcquireResultTest {
      2. public static void main(String[] args) throws ExecutionException, InterruptedException {
      3. //getNow方法测试
      4. CompletableFuture<String> cp1 = CompletableFuture.supplyAsync(() -> {
      5. try {
      6. Thread.sleep(60 * 1000 * 60 );
      7. } catch (InterruptedException e) {
      8. e.printStackTrace();
      9. }
      10. return "hello world";
      11. });
      12. System.out.println(cp1.getNow("hello h2t"));
      13. //join方法测试
      14. CompletableFuture<Integer> cp2 = CompletableFuture.supplyAsync((()-> 1 / 0));
      15. System.out.println(cp2.join());
      16. //get方法测试
      17. CompletableFuture<Integer> cp3 = CompletableFuture.supplyAsync((()-> 1 / 0));
      18. System.out.println(cp3.get());
      19. }
      20. }

      说明:

  • 第一个执行结果为hello h2t,因为要先睡上1分钟结果不能立即获取

  • join方法获取结果方法里不会抛异常,但是执行结果会抛异常,抛出的异常为CompletionException
  • get方法获取结果方法里将抛出异常,执行结果抛出的异常为ExecutionException
  • 异常处理: 使用静态方法创建的CompletableFuture对象无需显示处理异常,使用new创建的对象需要调用completeExceptionally方法设置捕获到的异常,举例说明:

    1. CompletableFuture completableFuture = new CompletableFuture();
    2. new Thread(() -> {
    3. try {
    4. //doSomething,调用complete方法将其他方法的执行结果记录在completableFuture对象中
    5. completableFuture.complete(null);
    6. } catch (Exception e) {
    7. //异常处理
    8. completableFuture.completeExceptionally(e);
    9. }
    10. }).start();

    同步方法Pick异步方法查询所有店铺某个商品价格

    店铺为一个列表:

    1. private static List<Shop> shopList = Arrays.asList(
    2. new Shop("BestPrice"),
    3. new Shop("LetsSaveBig"),
    4. new Shop("MyFavoriteShop"),
    5. new Shop("BuyItAll")
    6. );

    同步方法:

    1. private static List<String> findPriceSync(String product) {
    2. return shopList.stream()
    3. .map(shop -> String.format("%s price is %.2f",
    4. shop.getName(), shop.getPrice(product))) //格式转换
    5. .collect(Collectors.toList());
    6. }

    异步方法:

    1. private static List<String> findPriceAsync(String product) {
    2. List<CompletableFuture<String>> completableFutureList = shopList.stream()
    3. //转异步执行
    4. .map(shop -> CompletableFuture.supplyAsync(
    5. () -> String.format("%s price is %.2f",
    6. shop.getName(), shop.getPrice(product)))) //格式转换
    7. .collect(Collectors.toList());
    8. return completableFutureList.stream()
    9. .map(CompletableFuture::join) //获取结果不会抛出异常
    10. .collect(Collectors.toList());
    11. }

    性能测试结果:

    1. Find Price Sync Done in 4141
    2. Find Price Async Done in 1033

    异步执行效率提高四倍

    为什么仍需要CompletableFuture

    在JDK1.8以前,通过调用线程池的submit方法可以让任务以异步的方式运行,该方法会返回一个Future对象,通过调用get方法获取异步执行的结果:

    1. private static List<String> findPriceFutureAsync(String product) {
    2. ExecutorService es = Executors.newCachedThreadPool();
    3. List<Future<String>> futureList = shopList.stream().map(shop -> es.submit(() -> String.format("%s price is %.2f",
    4. shop.getName(), shop.getPrice(product)))).collect(Collectors.toList());
    5. return futureList.stream()
    6. .map(f -> {
    7. String result = null;
    8. try {
    9. result = f.get();
    10. } catch (InterruptedException e) {
    11. e.printStackTrace();
    12. } catch (ExecutionException e) {
    13. e.printStackTrace();
    14. }
    15. return result;
    16. }).collect(Collectors.toList());
    17. }

    既生瑜何生亮,为什么仍需要引入CompletableFuture?对于简单的业务场景使用Future完全没有,但是想将多个异步任务的计算结果组合起来,后一个异步任务的计算结果需要前一个异步任务的值等等,使用Future提供的那点API就囊中羞涩,处理起来不够优雅,这时候还是让CompletableFuture声明式的方式优雅的处理这些需求。而且在Future编程中想要拿到Future的值然后拿这个值去做后续的计算任务,只能通过轮询的方式去判断任务是否完成这样非常占CPU并且代码也不优雅,用伪代码表示如下:

    1. while(future.isDone()) {
    2. result = future.get();
    3. doSomrthingWithResult(result);
    4. }

    CompletableFuture提供了API实现这样的需求

    其他API介绍

    whenComplete计算结果的处理:

    对前面计算结果进行处理,无法返回新值 提供了三个方法:

    1. //方法一
    2. public CompletableFuture<T> whenComplete(BiConsumer<? super T,? super Throwable> action)
    3. //方法二
    4. public CompletableFuture<T> whenCompleteAsync(BiConsumer<? super T,? super Throwable> action)
    5. //方法三
    6. public CompletableFuture<T> whenCompleteAsync(BiConsumer<? super T,? super Throwable> action, Executor executor)

    说明:

  • BiFunction<? super T,? super U,? extends V> fn参数 => 定义对结果的处理

  • Executor executor参数 => 自定义线程池
  • async结尾的方法将会在一个新的线程中执行组合操作

示例:

  1. public class WhenCompleteTest {
  2. public static void main(String[] args) {
  3. CompletableFuture<String> cf1 = CompletableFuture.supplyAsync(() -> "hello");
  4. CompletableFuture<String> cf2 = cf1.whenComplete((v, e) ->
  5. System.out.println(String.format("value:%s, exception:%s", v, e)));
  6. System.out.println(cf2.join());
  7. }
  8. }

thenApply转换:

将前面计算结果的的CompletableFuture传递给thenApply,返回thenApply处理后的结果。可以认为通过thenApply方法实现CompletableFuture<T>CompletableFuture<U>的转换。白话一点就是将CompletableFuture的计算结果作为thenApply方法的参数,返回thenApply方法处理后的结果 提供了三个方法:

  1. //方法一
  2. public <U> CompletableFuture<U> thenApply(
  3. Function<? super T,? extends U> fn) {
  4. return uniApplyStage(null, fn);
  5. }
  6. //方法二
  7. public <U> CompletableFuture<U> thenApplyAsync(
  8. Function<? super T,? extends U> fn) {
  9. return uniApplyStage(asyncPool, fn);
  10. }
  11. //方法三
  12. public <U> CompletableFuture<U> thenApplyAsync(
  13. Function<? super T,? extends U> fn, Executor executor) {
  14. return uniApplyStage(screenExecutor(executor), fn);
  15. }

说明:

  • Function<? super T,? extends U> fn参数 => 对前一个CompletableFuture计算结果的转化操作
  • Executor executor参数 => 自定义线程池
  • async结尾的方法将会在一个新的线程中执行组合操作 示例:

    1. public class ThenApplyTest {
    2. public static void main(String[] args) throws ExecutionException, InterruptedException {
    3. CompletableFuture<Integer> result = CompletableFuture.supplyAsync(ThenApplyTest::randomInteger).thenApply((i) -> i * 8);
    4. System.out.println(result.get());
    5. }
    6. public static Integer randomInteger() {
    7. return 10;
    8. }
    9. }

    这里将前一个CompletableFuture计算出来的结果扩大八倍

    thenAccept结果处理:

    thenApply也可以归类为对结果的处理,thenAcceptthenApply的区别就是没有返回值 提供了三个方法: ```java //方法一 public CompletableFuture thenAccept(Consumer<? super T> action) { return uniAcceptStage(null, action); }

//方法二 public CompletableFuture thenAcceptAsync(Consumer<? super T> action) { return uniAcceptStage(asyncPool, action); }

//方法三 public CompletableFuture thenAcceptAsync(Consumer<? super T> action, Executor executor) { return uniAcceptStage(screenExecutor(executor), action); }

  1. 说明:
  2. - `Consumer<? super T>` action参数 => 对前一个`CompletableFuture`计算结果的操作
  3. - `Executor` executor参数 => 自定义线程池
  4. - 同理以`async`结尾的方法将会在一个新的线程中执行组合操作 示例:
  5. ```java
  6. public class ThenAcceptTest {
  7. public static void main(String[] args) {
  8. CompletableFuture.supplyAsync(ThenAcceptTest::getList).thenAccept(strList -> strList.stream()
  9. .forEach(m -> System.out.println(m)));
  10. }
  11. public static List<String> getList() {
  12. return Arrays.asList("a", "b", "c");
  13. }
  14. }

将前一个CompletableFuture计算出来的结果打印出来

thenCompose异步结果流水化:

thenCompose方法可以将两个异步操作进行流水操作 提供了三个方法:

  1. //方法一
  2. public <U> CompletableFuture<U> thenCompose(
  3. Function<? super T, ? extends CompletionStage<U>> fn) {
  4. return uniComposeStage(null, fn);
  5. }
  6. //方法二
  7. public <U> CompletableFuture<U> thenComposeAsync(
  8. Function<? super T, ? extends CompletionStage<U>> fn) {
  9. return uniComposeStage(asyncPool, fn);
  10. }
  11. //方法三
  12. public <U> CompletableFuture<U> thenComposeAsync(
  13. Function<? super T, ? extends CompletionStage<U>> fn,
  14. Executor executor) {
  15. return uniComposeStage(screenExecutor(executor), fn);
  16. }

说明:

  • Function<? super T, ? extends CompletionStage<U>> fn参数 => 当前CompletableFuture计算结果的执行
  • Executor executor参数 => 自定义线程池
  • 同理以async结尾的方法将会在一个新的线程中执行组合操作 示例:

    1. public class ThenComposeTest {
    2. public static void main(String[] args) throws ExecutionException, InterruptedException {
    3. CompletableFuture<Integer> result = CompletableFuture.supplyAsync(ThenComposeTest::getInteger)
    4. .thenCompose(i -> CompletableFuture.supplyAsync(() -> i * 10));
    5. System.out.println(result.get());
    6. }
    7. private static int getInteger() {
    8. return 666;
    9. }
    10. private static int expandValue(int num) {
    11. return num * 10;
    12. }
    13. }

    执行流程图:
    CompletableFuture - 图1

    thenCombine组合结果:

    thenCombine方法将两个无关的CompletableFuture组合起来,第二个Completable并不依赖第一个Completable的结果 提供了三个方法: ```java //方法一 public CompletableFuture thenCombine( CompletionStage<? extends U> other, BiFunction<? super T,? super U,? extends V> fn) { return biApplyStage(null, other, fn); } //方法二 public CompletableFuture thenCombineAsync( CompletionStage<? extends U> other, BiFunction<? super T,? super U,? extends V> fn) { return biApplyStage(asyncPool, other, fn); }

//方法三 public CompletableFuture thenCombineAsync( CompletionStage<? extends U> other, BiFunction<? super T,? super U,? extends V> fn, Executor executor) { return biApplyStage(screenExecutor(executor), other, fn); }

  1. 说明:
  2. - `CompletionStage<? extends U>` other参数 => 新的`CompletableFuture`的计算结果
  3. - `BiFunction<? super T,? super U,? extends V>` fn参数 => 定义了两个`CompletableFuture`对象**完成计算后**如何合并结果,该参数是一个函数式接口,因此可以使用Lambda表达式
  4. - `Executor` executor参数 => 自定义线程池
  5. - 同理以`async`结尾的方法将会在一个新的线程中执行组合操作
  6. 示例:
  7. ```java
  8. public class ThenCombineTest {
  9. private static Random random = new Random();
  10. public static void main(String[] args) throws ExecutionException, InterruptedException {
  11. CompletableFuture<Integer> result = CompletableFuture.supplyAsync(ThenCombineTest::randomInteger).thenCombine(
  12. CompletableFuture.supplyAsync(ThenCombineTest::randomInteger), (i, j) -> i * j
  13. );
  14. System.out.println(result.get());
  15. }
  16. public static Integer randomInteger() {
  17. return random.nextInt(100);
  18. }
  19. }

将两个线程计算出来的值做一个乘法在返回 执行流程图:
CompletableFuture - 图2

allOf&anyOf组合多个CompletableFuture

方法介绍:

  1. //allOf
  2. public static CompletableFuture<Void> allOf(CompletableFuture<?>... cfs) {
  3. return andTree(cfs, 0, cfs.length - 1);
  4. }
  5. //anyOf
  6. public static CompletableFuture<Object> anyOf(CompletableFuture<?>... cfs) {
  7. return orTree(cfs, 0, cfs.length - 1);
  8. }

说明:

  • allOf => 所有的CompletableFuture都执行完后执行计算。
  • anyOf => 任意一个CompletableFuture执行完后就会执行计算

示例:

  • allOf方法测试

    1. public class AllOfTest {
    2. public static void main(String[] args) throws ExecutionException, InterruptedException {
    3. CompletableFuture<Void> future1 = CompletableFuture.supplyAsync(() -> {
    4. System.out.println("hello");
    5. return null;
    6. });
    7. CompletableFuture<Void> future2 = CompletableFuture.supplyAsync(() -> {
    8. System.out.println("world"); return null;
    9. });
    10. CompletableFuture<Void> result = CompletableFuture.allOf(future1, future2);
    11. System.out.println(result.get());
    12. }
    13. }

    allOf方法没有返回值,适合没有返回值并且需要前面所有任务执行完毕才能执行后续任务的应用场景

  • anyOf方法测试

    1. public class AnyOfTest {
    2. private static Random random = new Random();
    3. public static void main(String[] args) throws ExecutionException, InterruptedException {
    4. CompletableFuture<String> future1 = CompletableFuture.supplyAsync(() -> {
    5. randomSleep();
    6. System.out.println("hello");
    7. return "hello";});
    8. CompletableFuture<String> future2 = CompletableFuture.supplyAsync(() -> {
    9. randomSleep();
    10. System.out.println("world");
    11. return "world";
    12. });
    13. CompletableFuture<Object> result = CompletableFuture.anyOf(future1, future2);
    14. System.out.println(result.get());
    15. }
    16. private static void randomSleep() {
    17. try {
    18. Thread.sleep(random.nextInt(10));
    19. } catch (InterruptedException e) {
    20. e.printStackTrace();
    21. }
    22. }
    23. }

    两个线程都会将结果打印出来,但是get方法只会返回最先完成任务的结果。该方法比较适合只要有一个返回值就可以继续执行其他任务的应用场景

    注意点

    很多方法都提供了异步实现【带async后缀】,但是需小心谨慎使用这些异步方法,因为异步意味着存在上下文切换,可能性能不一定比同步好。如果需要使用异步的方法,先做测试,用测试数据说话!!!

    CompletableFuture的应用场景

    存在IO密集型的任务可以选择CompletableFuture,IO部分交由另外一个线程去执行。Logback、Log4j2异步日志记录的实现原理就是新起了一个线程去执行IO操作,这部分可以以CompletableFuture.runAsync(()->{ioOperation();})的方式去调用。如果是CPU密集型就不推荐使用了推荐使用并行流

    优化空间

    supplyAsync执行任务底层实现:

    1. public static <U> CompletableFuture<U> supplyAsync(Supplier<U> supplier) {
    2. return asyncSupplyStage(asyncPool, supplier);
    3. }
    4. static <U> CompletableFuture<U> asyncSupplyStage(Executor e, Supplier<U> f) {
    5. if (f == null) throw new NullPointerException();
    6. CompletableFuture<U> d = new CompletableFuture<U>();
    7. e.execute(new AsyncSupply<U>(d, f));
    8. return d;
    9. }

    底层调用的是线程池去执行任务,而CompletableFuture中默认线程池为ForkJoinPool

    1. private static final Executor asyncPool = useCommonPool ?
    2. ForkJoinPool.commonPool() : new ThreadPerTaskExecutor();

    ForkJoinPool线程池的大小取决于CPU的核数。CPU密集型任务线程池大小配置为CPU核心数就可以了,但是IO密集型,线程池的大小由CPU数量 CPU利用率 (1 + 线程等待时间/线程CPU时间)确定。而CompletableFuture的应用场景就是IO密集型任务,因此默认的ForkJoinPool一般无法达到最佳性能,需自己根据业务创建线程池