成人免费xxxxx在线视频软件_久久精品久久久_亚洲国产精品久久久_天天色天天色_亚洲人成一区_欧美一级欧美三级在线观看

讓API并行調用變得如絲般順滑的絕招

運維 數據庫運維
當數據量較大的時候,都會通過分庫分表來拆分,分擔讀寫的壓力。分庫分表后比較麻煩的就是查詢的問題,如果不是直接根據分片鍵去查詢的話,需要對多個表進行查詢。

[[360995]]

本文轉載自微信公眾號「猿天地」,作者尹吉歡。轉載本文請聯系猿天地公眾號。  

 當數據量較大的時候,都會通過分庫分表來拆分,分擔讀寫的壓力。分庫分表后比較麻煩的就是查詢的問題,如果不是直接根據分片鍵去查詢的話,需要對多個表進行查詢。

在一些復雜的業務場景下,比如訂單搜索,除了訂單號,用戶,商家 這些常用的搜索條件,可能還有時間,商品等等。

目前常見的做法將數據同步到 ES 這類搜索框架中進行查詢,然后通過搜出來的結果,一般是主鍵 ID, 再去具體的數據表中查詢完整的數據,組裝返回給調用方。

比如下面這段代碼,首先查詢出文章信息,然后根據文章中的用戶 ID 去查詢用戶的昵稱。

  1. List<ArticleBO> articleBos = articleDoPage.getRecords().stream().map(r -> { 
  2.     String nickname = userManager.getNickname(r.getUserId()); 
  3.     return articleBoConvert.convertPlus(r, nickname); 
  4. }).collect(Collectors.toList()); 

如果文章有 10 條數據,那么就需要調用 10 次用戶服務提供的接口,而且是同步調用操作。

當然我們也可以用并行流來實現并發調用,代碼如下:

  1. List<ArticleBO> articleBos = articleDoPage.getRecords().parallelStream().map(r -> { 
  2.     String nickname = userManager.getNickname(r.getUserId()); 
  3.     return articleBoConvert.convertPlus(r, nickname); 
  4. }).collect(Collectors.toList()); 

并行流的優點很明顯,代碼不用做特別大的改動。需要注意如果用并行流,最好單獨定義一個 ForkJoinPool。

除了用并行流,還可以使用批量查詢的方式來提高性能,降低 RPC 的調用次數,代碼如下:

  1. List<Long> userIds = articleDoPage.getRecords().stream().map(article -> article.getUserId()).collect(Collectors.toList()); 
  2. Map<Long, String> nickNameMap = userManager.queryByIds(userIds).stream().collect(Collectors.toMap(UserResponse::getId, UserResponse::getNickname)); 
  3. List<ArticleBO> articleBos = articleDoPage.getRecords().stream().map(r -> { 
  4.     String nickname = nickNameMap.containsKey(r.getUserId()) ? nickNameMap.get(r.getUserId()) : CommonConstant.DEFAULT_EMPTY_STR; 
  5.     return articleBoConvert.convertPlus(r, nickname); 
  6. }).collect(Collectors.toList()); 

但批量查詢還是同步模式,下面介紹如果使用 CompletableFuture 來實現異步并發調用,直接用原生的 CompletableFuture 也可以,但是編排能力沒有那么強,這里我們選擇一款基于 CompletableFuture 封裝的并行編排框來實現。

稍微做了下封裝,提供了更方便使用的工具類來實現并發調用多個接口的邏輯。

第一種方式,適用于比如從 ES 查出了一批 ID, 然后根據 ID 去數據庫中或者調用 RPC 查詢真實數據,最后得到一個 Map,可以根據 Key 獲取對應的數據。

內部是多線程并發調用,會等到結果全部返回。

  1. public Object aggregationApi() { 
  2.     long s = System.currentTimeMillis(); 
  3.     List<String> ids = new ArrayList<>(); 
  4.     ids.add("1"); 
  5.     ids.add("2"); 
  6.     ids.add("3"); 
  7.     Map<String, UserResponse> callResult = AsyncTemplate.call(ids, id -> { 
  8.         return userService.getUser(id); 
  9.     }, u -> u.getId(), COMMON_POOL); 
  10.     long e = System.currentTimeMillis(); 
  11.     System.out.println("耗時:" + (e-s) + "ms"); 
  12.     return ""

另一個場景就是 API 聚合的場景,需要并行調用多個接口,將結果進行組裝。

  1. List<AsyncCall> params = new ArrayList<>(); 
  2. AsyncCall<IntegerInteger> goodsQuery = new AsyncCall("goodsQuery", 1); 
  3. params.add(goodsQuery); 
  4. AsyncCall<String, OrderResponse> orderQuery = new AsyncCall("orderQuery""100"); 
  5. params.add(orderQuery); 
  6. UserQuery q = new UserQuery(); 
  7. q.setAge(18); 
  8. q.setName("yinjihuan"); 
  9. AsyncCall<UserQuery, UserResponse> userQuery = new AsyncCall("userQuery", q); 
  10. params.add(userQuery); 
  11. AsyncTemplate.call(params, p -> { 
  12.     if (p.getTaskId().equals("goodsQuery")) { 
  13.         AsyncCall<IntegerInteger> query = p; 
  14.         return goodsService.getGoodsName(query.getParam()); 
  15.     } 
  16.     if (p.getTaskId().equals("orderQuery")) { 
  17.         AsyncCall<String, OrderResponse> query = p; 
  18.         return orderService.getOrder(query.getParam()); 
  19.     } 
  20.     if (p.getTaskId().equals("userQuery")) { 
  21.         AsyncCall<UserQuery, UserResponse> query = p; 
  22.         return userService.getUser(query.getParam()); 
  23.     } 
  24.     return null
  25. }); 

AsyncCall 中定義參數和響應的類型,響應結果會在執行完后會自動設置到 AsyncCall 中。在 call 方法中需要根據 taskId 去做對應的處理邏輯,不同的 taskId 調用的接口不一樣。

源碼參考:https://github.com/yinjihuan/kitty

關于作者:尹吉歡,簡單的技術愛好者,《Spring Cloud 微服務-全棧技術與案例解析》, 《Spring Cloud 微服務 入門 實戰與進階》作者, 公眾號 猿天地 發起人。

原文鏈接:http://cxytiandi.com/blog/user/1

 

責任編輯:武曉燕 來源: 猿天地
相關推薦

2017-06-05 10:01:24

互聯網

2019-04-04 17:15:13

2010-08-06 17:09:14

加薪

2017-10-31 13:20:00

H5翻頁庫框架

2022-05-31 09:01:13

GitHub工具安全

2010-09-01 20:30:14

虛擬園區網網絡架構H3C

2015-10-28 14:03:32

數據遷移數據

2025-02-19 13:00:00

移動端觸摸事件響應速度JavaScrip

2021-06-07 17:46:31

Python 3.8Python編程語言

2010-09-15 21:14:48

IT管理網絡構架Juniper Net

2021-08-16 12:13:02

SwiftUIList ArticleList

2011-06-21 15:42:32

筆記本技巧

2009-04-16 09:13:09

PHP代碼優化提速

2022-10-10 09:41:54

LinuxWindowsWSL2

2020-07-20 10:40:52

Linux命令Ubuntu

2024-11-18 08:33:56

2023-07-06 10:45:03

CIO領導力

2022-03-04 20:28:02

VueReact網頁

2022-10-26 10:24:21

2015-12-02 09:37:24

數據中心數據中心優化
點贊
收藏

51CTO技術棧公眾號

主站蜘蛛池模板: 久久久久久久久久久久久九 | 亚洲高清视频一区二区 | 精品一区二区三区在线播放 | 久久中文免费视频 | 美女黄网 | 在线观看毛片网站 | 欧美一区二区三区视频在线观看 | 黄色大片免费看 | 草草精品 | 中文字幕第二区 | 国产精品激情 | 在线观看中文字幕一区二区 | 欧美日韩久久精品 | 国产视频精品在线 | 久久99久久98精品免观看软件 | 成人午夜免费福利视频 | 国产成人99 | 久久久久国产精品一区二区 | 日韩国产一区二区三区 | 精品一区二区三区四区外站 | 日韩一区av | 国产一区二区三区视频免费观看 | www久久av| 国产免费看 | 国产亚洲欧美在线视频 | 欧美日韩一区在线播放 | 91精品国产高清一区二区三区 | 国产一级精品毛片 | 欧洲一级毛片 | 欧美一级毛片久久99精品蜜桃 | 免费看黄色视屏 | 91久久久久久久久久久久久 | 欧美视频精品 | 久久网一区二区 | 99国产精品99久久久久久 | 国产一区二区三区四区三区四 | 黄网站免费观看 | 欧美日韩电影一区二区 | 免费精品久久久久久中文字幕 | 欧美一级二级视频 | 色毛片|