成人免费xxxxx在线视频软件_久久精品久久久_亚洲国产精品久久久_天天色天天色_亚洲人成一区_欧美一级欧美三级在线观看

數十萬定時任務,如何高效觸發定時和超時

開發 前端
搬運線程會去bucket中查找哪些執行時間戳的RunTimeMillis比現在的時間小,將這些記錄全部刪除;同時會解析出每個任務的Topic是什么,然后將這些任務PUSH到TOPIC對應的列表queue中。

項目產品中,大家都會有"定時任務"和"定時超時"的需求,初始階段,我們基本都是用少數的一些timer,即使是任務量越來越大的時候,我們就難免維護著大量的timer,或者進行了大量低效的掃描。

定時任務使用場景:當訂單一直處于未支付狀態時,如何及時的關閉訂單(已經使用)

如何定期檢查處于退款狀態的訂單是否已經退款成功(后期重構使用)

設計方案:

  • 整個Redis當做消息池,以KV形式存儲消息
  • 使用ZSET做優先隊列,按照Score維持優先級
  • 使用LIST結構,以先進先出的方式消費
  • ZSET和LIST存儲消息地址(對應消息池的每個KEY)
  • 使用定時器維護路由
  • 根據TTL規則實現消息延遲

咱們公司現階段就是使用的這套方法:

1.新增一個job,會job_pool中插入一條數據,記錄了業務方消費方。也會在bucket插入一條記錄,記錄執行的時間戳

2.搬運線程會去bucket中查找哪些執行時間戳的RunTimeMillis比現在的時間小,將這些記錄全部刪除;同時會解析出每個任務的Topic是什么,然后將這些任務PUSH到TOPIC對應的列表queue中

3每個topic的list都會有一個監聽線程去批量獲取list中的待消費數據,獲取到的數據全部扔給這個topic的消費線程池

4.消費線程池執行會去job_pool查找數據結構,返回給回調結構,執行回調方法。

圖片圖片

待優化的內容:

  1. 目前只有一個Queue隊列存放消息,當需要消費的消息大量堆積后,會影響消息通知的時效。改進的辦法是,開啟多個Queue,進行消息路由,再開啟多個消費線程進行消費,提供吞吐量
  2. 消息沒有進行持久化,存在風險,后續會將消息持久化到MongoDB中

一般來說還有什么其他方法實現這類需求呢?

“輪詢掃描法”

1.用一個Map<uid, last_packet_time>來記錄每一個uid最近一次請求時間last_packet_time

2.當某個用戶uid有請求包來到,實時更新這個Map

3.啟動一個timer,當Map中不為空時,輪詢掃描這個Map,看每個uid的last_packet_time是否超過30s,如果超過則進行超時處理

“多timer觸發法”

1.用一個Map<uid, last_packet_time>來記錄每一個uid最近一次請求時間last_packet_time

2.當某個用戶uid有請求包來到,實時更新這個Map,并同時對這個uid請求包啟動一個timer,30s之后觸發

3.每個uid請求包對應的timer觸發后,看Map中,查看這個uid的last_packet_time是否超過30s,如果超過則進行超時處理

方案一:只啟動一個timer,但需要輪詢,效率較低

方案二:不需要輪詢,但每個請求包要啟動一個timer,比較耗資源

ZSet(有序集合)數據結構來實現

  1. 創建ZSet:首先,你需要創建一個ZSet數據結構,其中每個訂單將作為一個成員,其分數將表示訂單的創建時間戳。你可以使用Redis等支持ZSet的數據庫來實現。
  2. 添加訂單:每當用戶創建新訂單時,將訂單添加到ZSet中,其中成員是訂單ID,分數是訂單的創建時間戳。
  3. 定時檢查訂單:定期(例如,每分鐘)執行一個程序或定時任務來檢查ZSet中的訂單。你可以使用程序來查詢ZSet,找到創建時間超過一定時間閾值的訂單,表示它們長時間未支付。
  4. 取消訂單:對于那些長時間未支付的訂單,可以將其從ZSet中刪除,并執行取消訂單的操作(例如,將訂單狀態設置為"已取消")。

import redis.clients.jedis.Jedis;
import redis.clients.jedis.Tuple;
import java.util.Set;


public class OrderCancellationSystem {
    public static void main(String[] args) {
        Jedis jedis = new Jedis("localhost"); // 連接到本地Redis服務器


        // 模擬添加訂單
        addOrder(jedis, "Order1");
        addOrder(jedis, "Order2");


        // 定時任務,每分鐘檢查訂單并自動取消
        while (true) {
            cancelLongUnpaidOrders(jedis);
            try {
                Thread.sleep(60000); // 等待一分鐘再次檢查
            } catch (InterruptedException e) {
                e.printStackTrace();
            }
        }
    }


    public static void addOrder(Jedis jedis, String orderId) {
        long currentTime = System.currentTimeMillis();
        jedis.zadd("orders", currentTime, orderId);
    }


    public static void cancelOrder(String orderId) {
        // 執行取消訂單操作,例如更新訂單狀態
        System.out.println("Cancelling order: " + orderId);
    }


    public static void cancelLongUnpaidOrders(Jedis jedis) {
        long expirationTime = System.currentTimeMillis() - 3600 * 1000; // 60分鐘前的時間戳
        Set<Tuple> longUnpaidOrders = jedis.zrangeByScoreWithScores("orders", "-inf", String.valueOf(expirationTime));


        for (Tuple order : longUnpaidOrders) {
            String orderId = order.getElement();
            cancelOrder(orderId);
            jedis.zrem("orders", orderId); // 從ZSet中刪除已取消的訂單
        }
    }
}

責任編輯:武曉燕 來源: 二進制跳動
相關推薦

2017-03-13 09:12:00

TCP數據結構請求包

2024-11-04 16:01:01

2013-02-19 09:56:26

2009-10-28 10:05:29

Ubuntucrontab定時任務

2012-02-07 13:31:14

SpringJava

2024-05-13 09:49:30

.NETQuartz庫Cron表達式

2010-03-10 15:47:58

crontab定時任務

2023-08-13 07:44:18

GPU模型英偉達

2024-09-09 08:11:12

2023-11-16 09:30:27

系統任務

2023-12-11 09:50:35

Linux定時器

2020-12-21 07:31:23

實現單機JDK

2010-01-07 13:38:41

Linux定時任務

2024-12-27 08:24:55

2014-11-09 10:28:04

2024-02-28 09:54:07

線程池配置

2022-03-28 08:31:29

線程池定時任務

2021-04-16 13:20:41

ZeitLinux工具

2020-08-05 07:37:29

任務系統定時

2015-08-20 11:09:53

準入控制盈高
點贊
收藏

51CTO技術棧公眾號

主站蜘蛛池模板: 特级黄一级播放 | 不用播放器看的av | 欧美精品久久久 | 国产精品美女 | 精品不卡 | 日韩视频一区二区在线 | 美女人人操 | 日本午夜精品一区二区三区 | 免费在线看a| 国产精品五区 | 涩涩鲁亚洲精品一区二区 | 在线免费观看成年人视频 | 精品自拍视频在线观看 | 亚洲视频免费播放 | 免费看爱爱视频 | 超碰日本| 国产精品区一区二区三 | 欧美日韩高清免费 | 超碰天天 | 久久久一区二区 | 91 久久 | 中文二区| 国产免国产免费 | 一级片网站视频 | 成人一区在线观看 | 亚洲精品久久久久久下一站 | 人人人人人爽 | 中文在线视频观看 | 看片wwwwwwwwwww | 国产精品日韩 | 国产精品影视 | 中文字幕亚洲一区 | 天天色天天射天天干 | 午夜影院操 | 久国久产久精永久网页 | 91国在线| 日本三级做a全过程在线观看 | 日本福利视频免费观看 | www.四虎.com | av看看| 成人av一区|