iis服务器助手广告广告
返回顶部
首页 > 资讯 > 后端开发 > Python >springboot执行延时任务之DelayQueue实例
  • 122
分享到

springboot执行延时任务之DelayQueue实例

springboot执行延时任务springboot DelayQueuespringboot延时任务 2023-02-14 15:02:53 122人浏览 独家记忆

Python 官方文档:入门教程 => 点击学习

摘要

目录SpringBoot执行延时任务之DelayQueueDelayQueue是什么?使用步骤日常开发延迟任务技术对比总结springboot执行延时任务之DelayQueue 提示

springboot执行延时任务之DelayQueue

提示:下面案例可供参考

DelayQueue是什么?

DelayQueue提供了在指定时间才能获取队列元素的功能,队列头元素是最接近过期的元素。

没有过期元素的话,使用poll()方法会返回null值,超时判定是通过getDelay(TimeUnit.NANOSECONDS)方法的返回值小于等于0来判断。

延时队列不能存放空元素。

一般使用take()方法阻塞等待,有过期元素时继续。

使用步骤

1.队列中的元素–DelayTask

代码如下(示例):

import java.util.Date;
import java.util.concurrent.Delayed;
import java.util.concurrent.TimeUnit;




public class DelayTask implements Delayed {
    final private HotelRabbitMQ data;
    final private long expire;

    
    public DelayTask(xx data, long expire) {
        super();
        this.data = data;
        this.expire = expire + System.currentTimeMillis();
    }

    public HotelRabbitMQ getData() {
        return data;
    }

    public long getExpire() {
        return expire;
    }

    @Override
    public boolean equals(Object obj) {
        if (obj instanceof DelayTask) {
            return this.data.getIdentifier().equals(((DelayTask) obj).getData().getIdentifier());
        }
        return false;
    }

    @Override
    public String toString() {
        return "{" + "data:" + data.toString() + "," + "expire:" + new Date(expire) + "}";
    }

    @Override
    public long getDelay(TimeUnit unit) {
        return unit.convert(this.expire - System.currentTimeMillis(), unit);
    }

    @Override
    public int compareTo(Delayed o) {
        long delta = getDelay(TimeUnit.NANOSECONDS) - o.getDelay(TimeUnit.NANOSECONDS);
        return (int) delta;
    }
}

2.用户自定义的业务数据基类

TaskBase类是用户自定义的业务数据基类,其中有一个identifier字段来标识任务的id,方便进行索引

代码如下(示例):

xx 类按自己需求定义

3.定义延时任务管理类DelayQueueManager

定义一个延时任务管理类DelayQueueManager,通过@Component注解加入到spring中管理,在需要使用的地方通过@Autowire注入

代码如下(示例):

import com.alibaba.fastJSON.jsON;
import org.fh.config.RabbitProducer;
import org.fh.entity.dyne.HotelRabbitMq;
import org.fh.entity.dyne.HotelReGISter;
import org.fh.entity.util.TaskBase;
import org.slf4j.Logger;
import org.slf4j.LoggerFactory;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.beans.factory.annotation.Value;
import org.springframework.boot.CommandLineRunner;
import org.springframework.stereotype.Component;
import java.util.concurrent.DelayQueue;
import java.util.concurrent.Executors;



@Component
public class DelayQueueManager implements CommandLineRunner {

    @Autowired
    RabbitProducer rabbitProducer;

    private final Logger logger = LoggerFactory.getLogger(DelayQueueManager.class);
    private DelayQueue<DelayTask> delayQueue = new DelayQueue<>();

    
    public void put(DelayTask task) {
        logger.info("加入延时任务:{}", task);
        delayQueue.put(task);
    }

    
    public boolean remove(DelayTask task) {
        logger.info("取消延时任务:{}", task);
        return delayQueue.remove(task);
    }

    
    public boolean remove(String taskid) {
        return remove(new DelayTask(new HotelRabbitMq(taskid), 0));
    }

    @Override
    public void run(String... args) throws Exception {
        logger.info("初始化延时队列");
        Executors.newSingleThreadExecutor().execute(new Thread(this::excuteThread));
    }

    
    private void excuteThread() {
        while (true) {
            try {
                DelayTask task = delayQueue.take();
                processTask(task);
            } catch (InterruptedException e) {
                break;
            }
        }
    }

    
    private void processTask(DelayTask task) {
        logger.info("执行延时任务:{}", task);
        //根据task中的data自定义数据来处理相关逻辑,例 if (task.getData() instanceof XXX) {}
        //发送rabbitmq
        //rabbitProducer.sendDemoQueue(task.getData());
    }

    public void put(HotelRegister hotelRegister, int i) {
    }
}

日常开发延迟任务

在开发中,往往会遇到一些关于延时任务的需求。例如

  • 生成订单30分钟未支付,则自动取消
  • 生成订单60秒后,给用户发短信

对上述的任务,我们给一个专业的名字来形容,那就是延时任务。延时任务属于定时任务的一种,不同于一般的定时任务,延时任务是在某事件触发后的未来某个时刻执行,没有重复的执行周期。

技术对比

1.DelayQueue

jdk自带DelayQueue是支持延时获取元素的阻塞队列,内部采用优先队列PriorityQueue 存储元素,同时元素必须实现 Delayed 接口

创建元素时可以指定多久才可以从队列中获取当前队列中获取当前元素,只有当延迟期满时才能从队列中提取元素

DelayQueue属于排序队列,它的特殊之处在于队列的元素必须实现Delayed接口,该接口需要实现compareTo和getDelay方法

  • getDelay方法:获取元素在队列中的剩余时间,只有当剩余时间为0时元素才可以出队列。
  • compareTo方法:用于排序,确定元素出队列的顺序。

在springboot中的实现

1:在测试包jdk下创建延迟任务元素对象DelayedTask,实现compareTo和getDelay方法,

2:在main方法中创建DelayQueue并向延迟队列中添加三个延迟任务,

3:循环的从延迟队列中拉取任务

public class DelayedTask  implements Delayed{
    
    // 任务的执行时间
    private int executeTime = 0;
    
    public DelayedTask(int delay){
        Calendar calendar = Calendar.getInstance();
        calendar.add(Calendar.SECOND,delay);
        this.executeTime = (int)(calendar.getTimeInMillis() /1000 );
    }
 
    
    @Override
    public long getDelay(TimeUnit unit) {
        Calendar calendar = Calendar.getInstance();
        return executeTime - (calendar.getTimeInMillis()/1000);
    }
 
    
    @Override
    public int compareTo(Delayed o) {
        long val = this.getDelay(TimeUnit.NANOSECONDS) - o.getDelay(TimeUnit.NANOSECONDS);
        return val == 0 ? 0 : ( val < 0 ? -1: 1 );
    }
 
 
    public static void main(String[] args) {
        DelayQueue<DelayedTask> queue = new DelayQueue<DelayedTask>();
        
        queue.add(new DelayedTask(5));
        queue.add(new DelayedTask(10));
        queue.add(new DelayedTask(15));
 
        System.out.println(System.currentTimeMillis()/1000+" start consume ");
        while(queue.size() != 0){
            DelayedTask delayedTask = queue.poll();
            if(delayedTask !=null ){
                System.out.println(System.currentTimeMillis()/1000+" cosume task");
            }
            //每隔一秒消费一次
            try {
                Thread.sleep(1000);
            } catch (InterruptedException e) {
                e.printStackTrace();
            }
        }     
    }
}

使用DelayQueue的问题:

  • 1.都是在内存中运行,如果宕机,数据全部消失       
  • 2.集群扩展相当麻烦   
  • 3.占用大量内存,影响性能   
  • 4.代码复杂度高

2.DB轮询   

数据库方案

将任务存在数据库中,然后使用定时器轮询

不足:小型系统如果只有几万任务,采用上述方案即可。如果大规模系统,任务量过大,对数据库造成的压力很大 。频繁查询数据库带来性能影响

3.数据库+缓存(redis)实现

zset数据类型的去重有序(分数排序)特点进行延迟

实现流程

特殊情况:如果Redis宕机导致数据无法恢复,那么需要有一种机制在系统启动后,重新加载全部未处理的任务到Cache中,此方案作为应急补充方案

问题思路:

为什么将任务放在数据库中?

延迟任务是一个通用的服务,任何需要延迟的任务都可以调用该任务,需要考虑数据持久化问题,存储数据库中是一种数据安全的考虑(备份机制)

 为什么redis中使用两种数据类型,list和zset?  效率问题,算法的时间复杂度

zset还做了那些优化:不同任务不同key,进一步优化

未来任务定时刷新支持:

启动类上添加@EnableScheduling注解,开启任务调度

执行方法上添加

 @Scheduled(cron = "0 */1 * * * ?") 每一分钟执行一次

redis key值匹配

方案1:keys模糊匹配

keys的模糊匹配功能很方便也很强大,但是在生产环境需要慎用!开发中使用keys的模糊匹配却发现redis的CPU使用率极高,所以公司的redis生产环境将keys命令禁用了!redis是单线程,会被堵塞

方案2:scan

 SCAN 命令是一个基于游标的迭代器,SCAN命令每次被调用之后, 都会向用户返回一个新的游标, 用户在下次迭代时需要使用这个新游标作为SCAN命令的游标参数, 以此来延续之前的迭代过程。

  • 分布式:解决任务重复执行的问题,控制分布式系统有序的去对共享资源进行操作,通过互斥来保证数据的一致性。
  • DB同步任务:当redis宕机数据丢失的时候,在系统启动时执行一次
  • DB同步任务逻辑:同步方法上添加@PostConstruct注解,1.删除全部未来队列数据  2.删除全部当前队列数据  3.从任务日志表查询待执行任务  4.遍历任务添加到缓存

总结

以上为个人经验,希望能给大家一个参考,也希望大家多多支持编程网。

--结束END--

本文标题: springboot执行延时任务之DelayQueue实例

本文链接: https://www.lsjlt.com/news/196039.html(转载时请注明来源链接)

有问题或投稿请发送至: 邮箱/279061341@qq.com    QQ/279061341

本篇文章演示代码以及资料文档资料下载

下载Word文档到电脑,方便收藏和打印~

下载Word文档
猜你喜欢
  • springboot执行延时任务之DelayQueue实例
    目录springboot执行延时任务之DelayQueueDelayQueue是什么?使用步骤日常开发延迟任务技术对比总结springboot执行延时任务之DelayQueue 提示...
    99+
    2023-02-14
    springboot执行延时任务 springboot DelayQueue springboot延时任务
  • Java DelayQueue实现任务延时示例讲解
    在项目中有使用到延时队列的场景,做个简单的记录说明;首先DelayQueue实现了BlockingQueue,加入其中的元素必须实现Delayed接口; 当生产者元素调用put往其中...
    99+
    2022-11-13
  • 定时任务实现的关键DelayQueue延迟队列是什么
    定时任务实现的关键DelayQueue延迟队列是什么,针对这个问题,这篇文章详细介绍了相对应的分析和解答,希望可以帮助更多想解决这个问题的小伙伴找到更简单易行的方法。今天学习是并发包提供的延迟队列(DelayQueue)。延迟队列说明延迟队...
    99+
    2023-06-19
  • springBoot @Scheduled实现多个任务同时开始执行
    目录@Scheduled多个任务同时开始执行只需在springBoot启动类上添加@Scheduled多定时任务,重叠执行@Scheduled如果有两个定时任务如果想要多个定时任务重...
    99+
    2022-11-12
  • Java之SpringBoot定时任务案例讲解
    1. SpringBoot--任务:定时任务 项目开发中经常需要执行一些定时任务,比如需要在每天凌晨的时候, 分析一次前一天的日志信息,Spring为我们提供了异步执行任务调度的...
    99+
    2022-11-12
  • Java任务定时执行器案例的实现
    目录⭐️前面的话⭐️1.定时器概述1.1认识定时器1.2Timer类的使用2.定时器的简单实现⭐️前面的话⭐️ 本篇文章将介绍Java多线程案例,定时器,定时器就像闹钟一样,等到了指...
    99+
    2022-11-13
  • SpringBoot中使用@scheduled定时执行任务的坑
    目录解决办法1.将@Scheduled注释的方法内部改成异步执行2.把Scheduled配置成成多线程执行要注意什么坑 不绕弯子了,直接说这个坑是啥: SpringBoot使用@sc...
    99+
    2022-11-13
  • springboot定时任务@Scheduled执行多次的问题
    目录springboot定时任务@Scheduled执行多次原因解决方法使用 @Scheduled 定时任务突然不执行了springboot定时任务@Scheduled执行多次 在s...
    99+
    2022-11-12
  • springBoot @Scheduled如何实现多个任务同时开始执行
    springBoot @Scheduled如何实现多个任务同时开始执行,针对这个问题,这篇文章详细介绍了相对应的分析和解答,希望可以帮助更多想解决这个问题的小伙伴找到更简单易行的方法。@Scheduled多个任务同时开始执行只需在...
    99+
    2023-06-22
  • PHP使用Redis队列执行定时任务实例讲解
    Redis类: <?php namespace Utils; use Phalcon\Config\Adapter\Ini as ConfigIni; ...
    99+
    2022-11-11
  • android定时执行任务怎么实现
    Android定时执行任务可以通过以下几种方式实现:1. 使用Handler和Timer:创建一个Handler对象,在Handle...
    99+
    2023-09-21
    android
  • php怎么实现定时执行任务
    在PHP中,可以使用以下几种方法来实现定时执行任务:1. 使用cron表达式:cron表达式是一种常用的定时任务调度语法,可以在操作...
    99+
    2023-08-12
    php
  • SpringBoot定时任务设计之时间轮案例原理详解
    目录知识准备什么是时间轮(Timing Wheel)Netty的HashedWheelTimer要解决什么问题HashedWheelTimer的使用方式实现案例Pom依赖2个简单例子...
    99+
    2022-11-13
  • django定期执行任务(实例讲解)
    要在django项目中定期执行任务,比如每天一定的时间点抓取数据,刷新数据库等,可以参考stackoverflow的方法,先编写一个manage.py命令,然后使用crontab来定时执行这个命令。 定制m...
    99+
    2022-06-04
    实例 django
  • 详解SpringBoot开发案例之整合定时任务(Scheduled)
    来来来小伙伴们,基于上篇的邮件服务,定时任务就不单独分项目了,天然整合进了邮件服务中。不知道,大家在工作之中,经常会用到那些定时任务去执行特定的业务,这里列举一下我在工作中曾经使用到的几种实现。任务介绍 Java自带的java.util....
    99+
    2023-05-31
    spring boot 定时任务
  • SpringBoot定时任务多线程实现示例
    测试Spring Boot定时任务冲突时,使用的线程数量 引入依赖: Spring Boot 2.6.1 <dependency> <group...
    99+
    2022-11-12
  • java实现周期性执行(定时任务)
    最近是遇到一个设备在线离线的判定问题,设计是每个多长时间(常规的定时任务)检测一次设备是否在前,当检测到里离线时,我们不能立马判断为离线,而是要在重试多测几次,只要一次成功就返回判定...
    99+
    2022-11-13
  • SpringBoot如何实现定时任务示例详解
    目录写在前面一、基于注解(@Scheduled)二、数据库动态配置1、表数据添加,资源配置1.1 添加表1.2 插入两条数据,job_key根据是完整的类名1.3 引入依赖1.4 配...
    99+
    2022-11-12
  • freertos实时操作系统空闲任务阻塞延时示例解析
    目录前言空闲任务阻塞延时SysTick实验现象前言 阻塞态:如果一个任务当前正在等待某个外部事件,则称它处于阻塞态。 rtos中的延时叫阻塞延时,即任务需要延时的时候,会放弃CPU的...
    99+
    2022-11-13
  • SpringBoot开发实战系列之动态定时任务
    目录前言代码编写效果演示  启动修改停止后记前言 定时器是我们项目中经常会用到的,SpringBoot使用@Scheduled注解可以快速启用一个简单的定时器(详情请看我们之前的博客...
    99+
    2022-11-12
软考高级职称资格查询
编程网,编程工程师的家园,是目前国内优秀的开源技术社区之一,形成了由开源软件库、代码分享、资讯、协作翻译、讨论区和博客等几大频道内容,为IT开发者提供了一个发现、使用、并交流开源技术的平台。
  • 官方手机版

  • 微信公众号

  • 商务合作