Xxl Job Versions Save

A distributed task scheduling framework.(分布式任务调度平台XXL-JOB)

v2.0.0

5 years ago

Release Notes

  • 1、调度中心迁移到 springboot;
  • 2、底层通讯组件迁移至 xxl-rpc;
  • 3、提供官方docker镜像,并推送至中央仓库(docker pull xuxueli/xxl-job-admin),更进一步实现产品开箱即用;
  • 4、新增无框架执行器Sample示例项目 "xxl-job-executor-sample-frameless"。不依赖第三方框架,只需main方法即可启动运行执行器;
  • 5、命令行任务:原生提供通用命令行任务Handler(Bean任务,"CommandJobHandler");业务方只需要提供命令行即可;
  • 6、任务状态优化,仅运行状态"NORMAL"任务关联至quartz,降低quartz底层数据存储与调度压力;
  • 7、任务状态规范:新增任务默认停止状态,任务更新时保持任务状态不变;
  • 8、IP获取逻辑优化,优先遍历网卡来获取可用IP;
  • 9、任务新增的API服务接口返回任务ID,方便调用方实用;
  • 10、组件化优化,移除对 spring 的依赖:非spring应用选用 "XxlJobExecutor" 、spring应用选用 "XxlJobSpringExecutor" 作为执行器组件;
  • 11、任务RollingLog展示逻辑优化,修复超时任务无法查看的问题;
  • 12、多项UI组件升级到最新版本,如:CodeMirror、Echarts、Jquery 等;
  • 13、项目依赖升级 groovy 至较新稳定版本;pom清理;
  • 14、子任务失败重试重试逻辑优化,子任务失败时将会按照其预设的失败重试次数主动进行重试

v1.9.2

5 years ago

版本 V1.9.2 特性[2018-10-05]

  • 1、任务超时控制:新增任务属性 "任务超时时间",并支持自定义,任务运行超时将会主动中断任务;
  • 2、任务失败重试次数:新增任务属性 "失败重试次数",并支持自定义,当任务失败时将会按照预设的失败重试次数主动进行重试;同时收敛废弃其他失败重试策略,如调度失败、执行失败、状态码失败等;
  • 3、新增任务运行模式 "GLUE模式(PHP) ",支持php脚本任务;
  • 4、新增任务运行模式 "GLUE模式(PowerShell) ",支持PowerShell脚本任务;
  • 5、调度全异步处理:任务触发之后,推送到调度队列,多线程并发处理调度请求,提高任务调度速率的同时,避免因网络问题导致quartz调度线程阻塞的问题;
  • 6、执行器任务结果落盘优化:执行器回调失败时将任务结果写磁盘,待重启或网络恢复时重试回调任务结果,防止任务执行结果丢失;
  • 7、任务日志查询速度大幅提升:百万级别数据量搜索速度提升1000倍;
  • 8、调度中心提供API服务,支持通过API服务对任务进行查询、新增、更新、启停等操作;
  • 9、底层自研Log组件参数占位符改为"{}",并修复打印有参日志时参数不匹配导致报错的问题;
  • 10、任务回调结果优化,支持展示在Rolling log中,方便问题排查;
  • 11、底层LocalCache组件兼容性优化,支持jdk9、jdk10及以上版本编译部署;
  • 12、告警邮件固定使用 UTF-8 编码格式,修复由机器编码导致的邮件乱码问题;
  • 13、告警邮件中展示失败告警信息;
  • 14、告警邮箱支持SSL配置;
  • 15、Window机器下File.separator不兼容问题修复;
  • 16、脚本任务异常Log输出优化;
  • 17、任务线程停止变量修饰符优化;
  • 18、脚本任务Log文件流关闭优化;
  • 19、任务报表成功、失败和进行中统计问题修复;
  • 20、核心依赖Core内部国际化处理;
  • 21、默认Quartz线程数调整为50;
  • 22、新增左侧菜单"运行报表";
  • 23、执行器手动设置IP时取消绑定Host的操作,该IP仅供执行器注册使用;修复指定外网IP时无法绑定执行器Host的问题;
  • 24、取消父子任务不可重复的限制,支持循环任务触发等特殊场景;
  • 25、任务调度备注中标注任务触发类型,如Cron触发、父任务触发、API触发等等,方便排查调度日志;
  • 26、底层日志组件SimpleDateFormat线程安全问题修复;
  • 27、执行器通讯线程优化,corePoolSize从256降低至32;
  • 28、任务日志表状态字段类型优化;
  • 29、GLUE脚本文件自动清理功能,及时清理过期脚本文件;
  • 30、执行器注册方式切换优化,切换自动注册时主动同步在线机器,避免执行器为空的问题;
  • 31、跨平台:除了提供Java、Python、PHP等十来种任务模式之外,新增提供基于HTTP的任务模式;
  • 32、底层RPC序列化协议调整为hessian2;
  • 33、修复表字段 “t.order”与数据库关键字冲突查询失败的问题,
  • 34、任务属性枚举 "任务模式、阻塞策略" 国际化优化;
  • 35、分片任务失败重试优化,仅重试当前失败的分片;
  • 36、任务触发时支持动态传参,调度中心与API服务均提供提供动态参数功能;
  • 37、任务执行日志、调度日志字段类型调整,改为text类型并取消字数限制;
  • 38、GLUE任务脚本字段类型调整,改为mediumtext类型,提高GLUE长度上限;
  • 39、任务监控线程Log输出优化,运行中任务的监控Log改为debug级别,减少非核心日志量;
  • 40、项目依赖全量升级至较新稳定版本,如spring、Jackson、groovy等等;
  • 41、docker支持:调度中心提供 Dockerfile 方便快速构建docker镜像;

v1.9.1

6 years ago

版本 V1.9.1 特性[2018-02-22]

  • 1、国际化:调度中心实现国际化,支持中文、英文两种语言,默认为中文。
  • 2、调度报表新增"运行中"中状态项;
  • 3、调度报表优化,报表SQL调优并且新增LocalCache缓存(缓存时间60s),提高大数据量下报表加载速度;
  • 4、修复打包部署时资源文件乱码问题;
  • 5、修复新版本chrome滚动到顶部失效问题;
  • 6、调度中心配置加载优化,取消对配置文件名的强依赖,支持加载磁盘配置;
  • 7、修复脚本任务Log文件未正常close的问题;
  • 8、项目依赖全量升级至较新稳定版本,如spring、jackson等等;

v1.9.0

6 years ago

版本 v1.9.0 特性

  • 1、新增Nutz执行器Sample示例项目;
  • 2、新增任务运行模式 "GLUE模式(NodeJS) ",支持NodeJS脚本任务;
  • 3、脚本任务Shell、Python和Nodejs等支持获取分片参数;
  • 4、失败重试,完整支持:调度中心调度失败且启用"失败重试"策略时,将会自动重试一次;执行器执行失败且回调失败重试状态(新增失败重试状态返回值)时,也将会自动重试一次;
  • 5、失败告警策略扩展:默认提供邮件失败告警,可扩展短信等,扩展代码位置为 "JobFailMonitorHelper.failAlarm";
  • 6、执行器端口支持自动生成(小于等于0时),避免端口定义冲突;
  • 7、调度报表优化,支持时间区间筛选;
  • 8、Log组件支持输出异常栈信息,底层实现优化;
  • 9、告警邮件样式优化,调整为表格形式,邮件组件调整为commons-email简化邮件操作;
  • 10、项目依赖全量升级至较新稳定版本,如spring、jackson等等;
  • 11、任务日志,记录发起调度的机器信息;
  • 12、交互优化,如登陆注销;
  • 13、任务Cron长度扩展支持至128位,支持负责类型Cron设置;
  • 14、执行器地址录入交互优化,地址长度扩展支持至512位,支持大规模执行器集群配置;
  • 15、任务参数“IJobHandler.execute”入参改为“String params”,增强入参通用性。
  • 16、IJobHandler提供init/destroy方法,支持在相应任务线程初始化和销毁时进行附加操作;
  • 17、任务注解调整为 “@JobHandler”,与任务抽象接口统一;
  • 18、修复任务监控线程被耗时任务阻塞的问题;
  • 19、修复任务监控线程无法监控任务触发和执行状态均未0的问题;
  • 20、执行器动态代理对象,拦截非业务方法的执行;
  • 21、修复JobThread捕获Error错误不更新JobLog的问题;
  • 22、修复任务列表界面左侧菜单合并时样式错乱问题;
  • 23、调度中心项目日志配置改为xml文件格式;
  • 24、Log地址格式兼容,支持非"/"结尾路径配置;
  • 25、底层系统日志级别规范调整,清理遗留代码;
  • 26、建表SQL优化,支持同步创建制定编码的库和表;
  • 27、系统安全性优化,登陆Token写Cookie时进行MD5加密,同时Cookie启用HttpOnly;
  • 28、新增"任务ID"属性,移除"JobKey"属性,前者承担所有功能,方便后续增强任务依赖功能。
  • 29、任务循环依赖问题修复,避免子任务与父任务重复导致的调度死循环;
  • 30、任务列表新增筛选条件 "任务描述",快速检索任务;
  • 31、执行器Log文件定期清理功能:执行器新增配置项("xxl.job.executor.logretentiondays")日志保存天数,日志文件过期自动删除。

v1.8.2

6 years ago

版本 V1.8.2 特性

  • 1、项目主页搭建:提供中英文文档:http://www.xuxueli.com/xxl-job
  • 2、JFinal执行器Sample示例项目;
  • 3、事件触发:除了"Cron方式"和"任务依赖方式"触发任务执行之外,支持基于事件的触发任务方式。调度中心提供触发任务单次执行的API服务,可根据业务事件灵活触发。
  • 4、执行器摘除:执行器销毁时,主动通知调度中心并摘除对应执行器节点,提高执行器状态感知的时效性。
  • 5、执行器手动设置IP时将会绑定Host;
  • 6、规范项目目录,方便扩展多执行器;
  • 7、解决执行器回调URL不支持配置HTTPS时问题;
  • 8、执行器回调线程销毁前, 批量回调队列中数据,防止任务结果丢失;
  • 9、调度中心任务监控线程销毁时,批量对失败任务告警,防止告警信息丢失;
  • 10、任务日志文件路径时间戳格式化时SimpleDateFormat并发问题解决;

v1.8.1

6 years ago

版本 V1.8.1 特性

  • 1、分片广播任务:执行器集群部署时,任务路由策略选择"分片广播"情况下,一次任务调度将会广播触发集群中所有执行器执行一次任务,可根据分片参数处理分片任务;
  • 2、动态分片:分片广播任务以执行器为维度进行分片,支持动态扩容执行器集群从而动态增加分片数量,协同进行业务处理;在进行大数据量业务操作时可显著提升任务处理能力和速度。
  • 3、执行器JobHandler禁止命名冲突;
  • 4、执行器集群地址列表进行自然排序;
  • 5、调度中心,DAO层代码精简优化并且新增测试用例覆盖;
  • 6、调度中心API服务改为自研RPC形式,统一底层通讯模型;
  • 7、新增调度中心API服务测试Demo,方便在调度中心API扩展和测试;
  • 8、任务列表页交互优化,更换执行器分组时自动刷新任务列表,新建任务时默认定位在当前执行器位置;
  • 9、访问令牌(accessToken):为提升系统安全性,调度中心和执行器进行安全性校验,双方AccessToken匹配才允许通讯;
  • 10、springboot版本执行器,升级至1.5.6.RELEASE版本;
  • 11、统一maven依赖版本管理;

v1.8.0

6 years ago

版本 V1.8.0 特性

  • 1、任务Cron更新逻辑优化,改为rescheduleJob,同时防止cron重复设置;
  • 2、API回调服务失败状态码优化,方便问题排查;
  • 3、XxlJobLogger的日志多参数支持;
  • 4、路由策略新增 "忙碌转移" 模式:按照顺序依次进行空闲检测,第一个空闲检测成功的机器选定为目标执行器并发起调度;
  • 5、路由策略代码重构;
  • 6、执行器重复注册问题修复;
  • 7、任务线程轮空30次后自动销毁,降低低频任务的无效线程消耗。
  • 8、执行器任务执行结果批量回调,降低回调频率提升执行器性能;
  • 9、springboot版本执行器,取消XML配置,改为类配置方式;
  • 10、执行日志,支持根据运行 "状态" 筛选日志;
  • 11、调度中心任务注册检测逻辑优化;

v1.7.2

6 years ago

1、阻塞处理策略:调度过于密集执行器来不及处理时的处理策略,策略包括:单机串行(默认)、丢弃后续调度、覆盖之前调度; 2、失败处理策略;调度失败时的处理策略,策略包括:失败告警(默认)、失败重试; 3、通讯时间戳超时时间调整为180s; 4、执行器与数据库彻底解耦,但是执行器需要配置调度中心集群地址。调度中心提供API供执行器回调和心跳注册服务,取消调度中心内部jetty,心跳周期调整为30s,心跳失效为三倍心跳; 5、执行参数编辑时丢失问题修复; 6、新增任务测试Demo,方便在开发时进行任务逻辑测试;

v1.7.1

6 years ago

1、运行日志读写编码统一为UTF-8,解决windows环境下日志乱码问题; 2、通讯超时时间限定为10s,避免异常情况下调度线程占用; 3、执行器,server启动、销毁和注册逻辑调整; 4、JettyServer关闭逻辑优化,修复执行器无法正常关闭导致端口占用和频繁打印c3p0日志的问题; 5、JobHandler中开启子线程时,支持子线程输出执行日志并通过Rolling查看。 6、任务日志清理功能; 7、弹框组件统一替换为layer; 8、升级quartz版本至2.3.0;

v1.7.0

6 years ago
  • 1、脚本任务:支持以GLUE模式开发和运行脚本任务,包括Shell、Python和Groovy等类型脚本;
  • 2、新增spring-boot类型执行器example项目;
  • 3、升级jetty版本至9.2;
  • 4、任务运行日志移除log4j组件依赖,改为底层自主实现,从而取消了对日志组件的依赖限制;
  • 5、执行器移除GlueLoader依赖,改为推送方式实现,从而GLUE源码加载不再依赖JDBC;
  • 6、登录拦截Redirect时获取项目名,解决非根据目录发布时跳转404问题;