这是我参与「第五届青训营 」伴学笔记创作活动的第 12 天

分布式定时任务(上)

前言

春节集卡瓜分20亿

作为后端开发同学，怎么设计最终开奖环节技术方案?

• 亿级用户规模
• 亿级资金规模
• 万级读写QPS

自动化 + 定时执行 + 海量数据 + 高效稳定 = 分布式定时任务

发展历程

Windows批处理

Case 1: 10分钟后Windows电脑自动关机

• Step1:桌面空白处右键单击-新建-文本文档
• Step2:更改文件名和后缀为“自动关机.bat”
• Step3:修改文件内容为" shutdown -s -t 6oo",代表10分钟后关机
• Step4:双击运行该批处理文件，电脑将会在1o分钟之后自动关机

Windows任务计划程序

Case 2:每天12:00自动疫情打卡

Linux命令-CronJob

Case 3:每天02:30定时清理机器日志

• Linux系统命令，使用简单，稳定可靠
• 只能控制单台机器，且无法适用于其他操作系统

单机定时任务-Timer、Ticker

Case 4:每隔5分钟定时刷新本地缓存数据

java

go

• 跨平台
• 仅单机可用

单机定时任务-ScheduledExecutorService

Case 5:每隔5分钟定时执行多个任务

• 拥有线程池功能
• 仅单机可用

任务调度- Quartz

• 单任务极致控制
• 没有负载均衡机制

分布式定时任务

• 平台化管理
• 分布式部署
• 支持海量数据

什么是分布式定时任务

定时任务是指系统为了自动完成特定任务，实时、延时、周期性完成任务调度的过程。

分布式定时任务是把分散的、可靠性差的定时任务纳入统一的平台，并实现集群管理调度和分布式部署的一种定时任务的管理方式。

按触发时机分类:

• 定时任务:特定时间触发，比如今天15:o6执行
• 延时任务:延时触发，比如:os后执行
• 周期任务:固定周期时间，或固定频率周期调度触发，比如每隔ys或者每天1z点执行

分布式定时任务-特点

• 自动化:全自动完成定时任务的调度和执行
• 平台化:基于平台化的思维管控一系列的分布式定时任务
• 分布式:在分布式系统环境下运行任务调度，突破单机定时任务的性能瓶颈
• 伸缩性:采用集群方式部署，可以随时按需扩缩容
• 高可用:单点故障不影响最终任务结果，可以做到故障转移