这是我参与「第三届青训营 -后端场」笔记创作活动的的第4篇笔记。

主要内容

1. 分布式定时任务整体架构
2. 触发器Trigger介绍
3. 调度器Scheduler介绍
4. 执行器Executor介绍

背景

• 定时任务是指系统为了自动完成特定任务，实时、延时、周期性完成任务调度的过程。
• 分布式定时任务是把分散的、可靠性差的定时任务纳入统一的平台，并实现集群管理调度和分布式部署的一种定时任务的管理方式。

发展历史

• 分布式定时任务VS单机定时任务

  • 关系：
    • 都可以实现自动化的定时、延时、周期任务调度
  • 差异:
    • 分布式定时任务可支撑更大的业务体量
    • 分布式定时任务的性能、伸缩性、稳定性更高

• 分布式定时任务VS大数据处理引擎

  • 关系:
    • 都可以对海量数据做处理。
    • 性能、伸缩性、稳定性都很高
  • 差异:
    • 定时并不是大数据处理引擎要解决的核心问题
    • 大数据处理引擎往往致力于将源数据处理成结果数据，分布式定时任务除了能做这个之外，还可以调用HTTP和RPC服务

实现原理

分布式定时任务核心要解决触发、调度、执行三个关键问题

• 触发器: Trigger，解析任务，生成触发事件 方案1：定期扫描+延时消息

方案2：时间轮（Quartz所用方案）

• 调度器: Scheduler，分配任务，管理任务生命周期 通过任务分片来提高任务执行的效率和资源的利用率

• 执行器:Executor，获取执行任务单元，执行任务逻辑 除此之外，还需要提供一个控制台(Admin)，提供任务管理和干预的功能。

什么叫任务元数据？

任务元数据(Job）是用户对任务属性定义，包括任务类型调度时机、执行行为等。