分布式定时任务最全详解(图文全面总结)
yuyutoo 2024-12-25 16:32 1 浏览 0 评论
分布式定时任务是非常核心的分布式系统,下面我就全面来详解分布式定时任务以及分布式定时任务框架@mikechen
本篇已收于mikechen原创超30万字《阿里架构师进阶专题合集》里面。
什么是分布式定时任务
分布式定时任务:是指将定时任务分布在多个节点上,进行执行和调度的一种任务调度方式。
在传统的单机环境中,定时任务通常由单个进程、或线程负责执行和调度。
而在分布式环境下,由于系统的规模较大,单个节点可能无法满足任务执行的需求,因此需要将定时任务分布到多个节点上进行执行,以提高系统的性能和可靠性。
分布式定时任务作用
分布式定时任务允许在系统中精确指定任务执行的时刻,确保任务在需要的时候准时执行,例如:每日报表生成、数据备份等。
分布式定时任务框架提供了灵活的任务调度和管理功能,可以根据业务需求动态调整任务的执行频率、优先级和参数配置,满足不同业务场景的需求。
分布式定时任务框架
1.quartz
Quartz 是一个开源的 Java 定时任务调度框架,支持集群部署和分布式任务调度,可以实现高可用和高性能的定时任务处理。
Quartz 功能,主要包含如下:
- 作业调度:Quartz 能够按照预定的时间表和条件调度作业的执行,支持一次性执行、重复执行、定时执行等多种调度方式。
- 作业管理:Quartz 提供了作业的管理功能,包括作业的创建、修改、删除等操作,可以动态管理调度任务。
- 作业触发:Quartz 支持多种触发器,包括简单触发器、Cron 触发器等,可以根据不同的触发条件来触发作业的执行。
- 作业状态监控:Quartz 提供了作业执行状态的监控和统计功能,可以查看作业的执行情况和执行历史,便于任务的管理和调优。
Quartz核心实现,主要包含:
- Scheduler(调度器):Scheduler 是 Quartz 的核心组件,负责调度作业的执行,管理触发器和作业的注册和调度。
- Job(作业):Job 是需要执行的任务逻辑的定义,可以通过实现 Job 接口或继承 Quartz 提供的抽象 Job 类来定义作业逻辑。
- Trigger(触发器):Trigger 是用于触发作业执行的组件,可以根据预定的时间表和条件触发作业的执行,包括简单触发器、Cron 触发器等。
2.elastic-job
Elastic-Job 是一个开源的分布式任务调度解决方案,主要解决分布式环境下任务调度的问题,具有灵活、易用、高可靠等特点。
Elastic-Job 包含两个独立的子项目:
1.Elastic-Job-Lite
Elastic-Job-Lite 定位为轻量级无中心化解决方案,以 jar 包的形式提供分布式任务的协调服务。
它主要用于简单的任务调度场景,不依赖于中心化的调度服务,而是通过协调各个任务节点的方式实现分布式任务调度。
2.Elastic-Job-Cloud
Elastic-Job-Cloud 使用 Mesos 和 Docker 的解决方案,额外提供了资源治理、应用分发以及进程隔离等服务。
相比于 Elastic-Job-Lite,Elastic-Job-Cloud 更适用于复杂的任务调度场景,提供了更丰富的功能和更强大的扩展性。
3.xxl-job
XXL-Job 是一个分布式任务调度平台,为企业提供了分布式任务调度和执行的解决方案。
如下图所示:
主要功能包含:
- 任务调度管理:XXL-Job 提供了任务的注册、调度和管理功能,支持定时执行、固定频率执行等多种调度方式。
- 任务执行器管理:XXL-Job 支持任务执行器的注册和管理,可以动态添加、删除和更新执行器。
- 任务执行监控:XXL-Job 提供了任务执行状态的实时监控功能,可以查看任务的执行情况、执行日志等。
- 任务执行报警:XXL-Job 支持任务执行结果的报警机制,可以根据任务执行情况发送报警消息。
除此之外,还有TBSchedule、DistributedTask等分布式定时任务开源框架,更多分布式请查看:史上最强分布式系统详解(非常全面)。
本篇已收于mikechen原创超30万字《阿里架构师进阶专题合集》里面。
相关推荐
- GitHub精选 | 基于go开发的定时任务管理系统
-
《GitHub精选》是我们分享Github中优质项目的栏目,包括技术、学习、实用与各种有趣的内容。本期推荐的是gocron-定时任务管理系统之前有过一期...
- linux定时任务,让你更深入的了解系统
-
cron的软件包cronierpm-qlcronierpm–qlcrontabs最关键的是一个叫做crontab的命令,我们要书写的非系统定时任务就是通过此程序来编写的;要保证crond.se...
- linux定时任务详解 linux定时任务执行
-
配置方式:(记忆口诀:分、时、日、月、星)#Fordetailsseeman4crontabs#Exampleofjobdefinition:#.---------------...
- 我终于会写 Java 的定时任务了 java定时任务指定时间执行
-
前言学过定时任务,但是我忘了,忘得一干二净,害怕,一直听别人说:...
- 如何用Windows计划任务设置:定时关机
-
定时关机其实是一个小功能,很多时候还真的需要它。你在网上找还真不是那么好找,下面我们用Windows计划任务设置:定时关机,而且,我还在计划任务中看到了几个不该有的计划任务。?打开:计划任务点击Co...
- 定时任务优化总结(从半个小时优化到秒级)
-
整体优化思路:1.按需查询、2.分小批次游标查询、3.JED场景下按数据库分片分组更新、4.精准定位要处理的数据、5.负载均衡业务背景:...
- 信创终端操作系统上定时任务crontab详解 | 统信 | 麒麟 | 中科方德
-
原文链接:信创终端操作系统上定时任务crontab详解|统信|麒麟|中科方德...
- VIVO手机定时任务功能_定时开关机、定时振动模式
-
手机在生活中是必不可少的,有些功能我们想要他定时切换变更,本文就来分享一下Vivo手机的定时任务功能。Vivo手机如何进入定时任务界面...
- 下班总是忘记关电脑!添加任务自动定时关机,不用再跑一趟!
-
我们每个人都有过这样的经历,下班后、或者出差,单位里的电脑总是忘记关机!很是烦恼!经常忘关电脑的话,一是费电,二是不安全,会给网络攻击留有足够的时间,会导致信息泄露,存在安全隐患。其实只要我们在电脑...
- 为什么定时任务到时间不执行?带你深入源码找答案
-
前言早上研发经理给我分配了一个开发任务:每5秒统计一次APP在线人数,并问我啥时能上线?我心想这需求用Spring的定时任务完美解决啊!作为一个萌新正好借此机会在经理面前表现一番,于是我拍着胸脯跟经理...
- 我来总结下 几种定时任务的执行方式
-
首先带入我们的业务场景:我们买火车票或者叫外卖的时候,下完单之后会跳转到支付页面,页面会有一个计时器,要求在指定时间内完成支付,否则订单自动取消。这是延时任务的一个典型场景,分析这个场景,就是如何在订...
- 聊聊定时任务的六种模式 定时任务详解
-
这篇文章,我们聊聊实现定时任务的六种策略。1自定义单线程上图中,我们启动一个线程,该线程无限循环执行,每隔20毫秒执行业务代码。...
- windows如何实现定时任务?配合脚本使用结局很满意
-
序言:作为一名程序员,通过定时任务去实现各种所需的功能是必须要掌握的,本文来讲解一下在windows服务器上如何创建定时任务。有需要的小伙伴赶紧收藏转发吧。第一步:打开控制面板-》系统和安全-》管理工...
- 电脑(计算机)如何定时执行任务 电脑定时器怎么定时
-
电脑想定时执行程序,任务计划步骤如下:1,系统服务里,确保"TaskScheduler"服务启动。2,在控制面板->系统和安全里,找到任务计划,并点击: 或在“管理工具”里点...
- 分布式定时任务最全详解(图文全面总结)
-
分布式定时任务是非常核心的分布式系统,下面我就全面来详解分布式定时任务以及分布式定时任务框架@mikechen本篇已收于mikechen原创超30万字《阿里架构师进阶专题合集》里面。什么是分布式定时任...
你 发表评论:
欢迎- 一周热门
- 最近发表
- 标签列表
-
- mybatis plus (70)
- scheduledtask (71)
- css滚动条 (60)
- java学生成绩管理系统 (59)
- 结构体数组 (69)
- databasemetadata (64)
- javastatic (68)
- jsp实用教程 (53)
- fontawesome (57)
- widget开发 (57)
- vb net教程 (62)
- hibernate 教程 (63)
- case语句 (57)
- svn连接 (74)
- directoryindex (69)
- session timeout (58)
- textbox换行 (67)
- extension_dir (64)
- linearlayout (58)
- vba高级教程 (75)
- iframe用法 (58)
- sqlparameter (59)
- trim函数 (59)
- flex布局 (63)
- contextloaderlistener (56)