Commit Graph

567 Commits

Author SHA1 Message Date
xuxueli c8f2a71a25 首页调度报表的日期排序在TIDB下乱序问题修复 2019-05-27 21:17:49 +08:00
xuxueli ba3a695a3b update document 2019-05-24 11:36:14 +08:00
xuxueli f96f22421c update document 2019-05-23 17:44:24 +08:00
xuxueli ac5897a8e2 任务列表支持根据状态筛选 2019-05-23 16:21:58 +08:00
xuxueli 336e8642b4 ... 2019-05-23 14:55:17 +08:00
xuxueli 5c1f59323e 任务调度错过触发时间时的处理策略:
- 可能原因:服务重启;调度线程被阻塞,线程被耗尽;上次调度持续阻塞,下次调度被错过;
- 处理策略:
    - 过期超10s:本地忽略,当前时间开始计算下次触发时间
    - 过期超过5s:过期10s内:立即触发一次,当前时间开始计算下次触发时间
2019-05-22 16:29:10 +08:00
xuxueli e01d2bc9b5 - 1、自研调度组件,移除quartz依赖:一方面是为了精简系统降低冗余依赖,另一方面是为了提供系统的可控度与稳定性;
- 触发:单节点周期性触发,运行事件如delayqueue;
    - 调度:集群竞争,负载方式协同处理,锁竞争-更新触发信息-推送时间轮-锁释放-锁竞争;
- 2、底层表结构重构:移除11张quartz相关表,并对现有表结构优化梳理;
- 3、底层线程模型重构:移除Quartz线程池,降低系统线程与内存开销;
2019-05-22 12:01:48 +08:00
xuxueli 802e3d3cce 日志权限控制:仅管理员支持查询全部;普通用户仅支持查询有权限的 jobGroup 2019-05-08 22:12:03 +08:00
xuxueli 9329fb39e7 GLUE代码越权控制 2019-05-08 21:46:05 +08:00
xuxueli a0012b290e update document 2019-05-08 17:52:23 +08:00
xuxueli 180439e210 update document 2019-05-06 21:48:53 +08:00
xuxueli 31a1dc66be update document 2019-05-06 21:17:55 +08:00
xuxueli 376b530306 update document 2019-05-06 21:07:34 +08:00
xuxueli 86fbb4d11b 权限控制:执行器维度进行权限控制,管理员拥有全量权限,普通用户需要分配执行器权限后才允许相关操作; 2019-05-04 23:17:23 +08:00
xuxueli b3b9ff80d4 用户管理:支持在线维护系统用户 2019-05-04 21:38:04 +08:00
xuxueli b32791b0c3 注册表索引优化,缓解锁表问题 2019-05-04 02:16:29 +08:00
xuxueli 9804b05f12 升级xxl-rpc至较新版本,并清理冗余POM 2019-05-04 02:04:41 +08:00
xuxueli ab4335ee02 调度线程池参数调优 2019-05-04 01:54:27 +08:00
xuxueli 6b3d79ed2c optimize 2019-04-27 15:55:55 +08:00
xuxueli a0b4275c94 更新RM 2019-04-20 16:57:38 +08:00
xuxueli 0cd0dd9dce 升级正式版本:v2.0.2 2019-04-20 15:37:59 +08:00
xuxueli 9d92fa7578 精简项目,取消第三方依赖 ommons-lang3 2019-04-20 15:25:26 +08:00
xuxueli e6453fa621 任务启、停、删除、触发等轻操作提示改为toast方式 2019-04-20 14:00:38 +08:00
xuxueli 65ca201780 升级xxl-rpc至较新版本,修复springboot 2.x版本兼容性问题 2019-04-20 13:37:24 +08:00
xuxueli 4216b2a347 optimize 2019-04-20 13:09:56 +08:00
xuxueli 0c2e004feb optimize 2019-04-20 11:35:16 +08:00
xuxueli 3d5d114fc4 optimize 2019-04-20 10:56:33 +08:00
xuxueli cb38e8f0a9 升级依赖版本 2019-04-19 16:40:28 +08:00
xuxueli d1ed92c6cd update document 2019-04-19 16:09:52 +08:00
xuxueli 1aaa59ab84 update document 2019-03-13 19:33:10 +08:00
xuxueli 8658f8d853 - Quartz触发线程池废弃并替换为 "XxlJobThreadPool",降低线程切换、内存占用带来的消耗,提高调度性能;
- 调度线程池隔离,拆分为"Fast"和"Slow"两个线程池,1分钟窗口期内任务耗时达500ms超过10次,该窗口期内判定为慢任务,慢任务自动降级进入"Slow"线程池,避免耗尽调度线程,提高系统稳定性;
2019-03-06 21:10:52 +08:00
xuxueli f83d03f78a update document 2019-03-06 17:59:41 +08:00
xuxueli cca3958295 服务端LocalCache,降低磁盘读写压力;LRU 方式缓存最近 10000 条; 2019-03-06 17:47:21 +08:00
xuxueli 98272cf07b update document 2019-03-05 20:13:09 +08:00
xuxueli d618c66544 update document 2019-03-05 19:46:12 +08:00
xuxueli 66ccd9fa1f update document 2019-03-05 19:34:16 +08:00
xuxueli 17a92d0731 update document 2019-03-05 11:12:03 +08:00
xuxueli 6fffec1837 GLUE 模式 Web Ide 版本对比功能 2019-02-26 15:42:52 +08:00
xuxueli c071a63f14 JobHandler#msg长度限制,修复异常情况下日志超长导致内存溢出的问题 2019-02-26 15:04:53 +08:00
xuxueli 2abe679b56 连接池配置优化,增强连接有效性验证 2019-02-26 14:30:10 +08:00
xuxueli f1346abc2e update document 2019-02-26 14:12:33 +08:00
xuxueli 9aa06a10f2 update document 2019-02-26 11:51:57 +08:00
xuxueli 79271abca9 update document 2019-02-26 11:27:01 +08:00
xuxueli e07293345e update document 2019-02-26 11:26:03 +08:00
xuxueli 5368b6917e 执行器优雅停机优化 2019-02-26 10:32:35 +08:00
xuxueli 575e7b4a38 调度日志排序字段调整为按照调度时间倒序,兼容TIDB等主键不连续日志存储组件 2019-02-26 09:28:12 +08:00
xuxueli 2016fa7cea 任务失败告警邮件发送逻辑优化 2019-02-25 20:03:52 +08:00
xuxueli 878df30bbc LRU路由更新不及时问题修复 2019-02-25 15:04:05 +08:00
xuxueli 0c97707087 update document 2019-02-22 15:46:57 +08:00
xuxueli e6483c4b26 新增Class的加载缓存,解决频繁加载Class会使jvm的方法区空间不足导致OOM的问题; 2019-02-22 15:27:30 +08:00
xuxueli 4e0cd873c0 update document 2019-02-22 14:56:02 +08:00
xuxueli bf311a2aba update document 2019-02-22 11:53:07 +08:00
xuxueli 571c024e25 update document 2019-02-22 11:38:37 +08:00
xuxueli 32a843534c 任务支持更换绑定执行器,方便任务分组转移和管理; 2019-02-21 19:08:40 +08:00
xuxueli 9cf966c402 update document 2019-02-21 13:11:28 +08:00
xuxueli 80b544b50a 执行器回调日志落盘方案复用RPC序列化方案,并移除Jackson依赖; 2019-02-18 19:30:53 +08:00
xuxueli 46779d7e6b 执行器回调日志落盘方案复用RPC序列化方案,并移除Jackson依赖; 2019-02-18 19:12:08 +08:00
xuxueli 2f1dda6946 任务回调、心跳注册成功日志优化,非核心常规日志调整为debug级别,降低冗余日志输出; 2019-02-18 13:04:19 +08:00
xuxueli 256c73c1ae 任务回调日志优化,调整为debug级别,降低冗余日志输出 2019-02-18 12:46:17 +08:00
xuxueli da6d5432f3 任务暂停、删除优化,避免quartz delete不完整导致任务脏数据; 2019-02-18 12:00:01 +08:00
xuxueli 85bf656935 底层通讯方案优化:升级较新版本xxl-rpc,由"JETTY"方案调整为"NETTY_HTTP"方案,执行器内嵌netty-http-server提供服务,调度中心复用容器端口提供服务; 2019-02-15 22:17:38 +08:00
xuxueli 5492b70e4b update document 2019-02-13 09:44:43 +08:00
xuxueli e404901ff5 update document 2019-02-01 11:16:25 +08:00
xuxueli 3f00fa39cc update document 2019-01-23 10:08:47 +08:00
xuxueli 98d3041440 更新RM 2019-01-09 15:53:57 +08:00
xuxueli fa9c4efec1 交互优化,尽量避免新开页面窗口;仅WebIDE支持新开页,并提供窗口快速关闭按钮; 2019-01-09 15:41:45 +08:00
xuxueli 1d2a893707 底层Log调优,应用正常终止取消异常栈信息打印; 2019-01-09 15:01:10 +08:00
xuxueli d54d679edb 升级 xxl-rpc 依赖; 2019-01-09 14:37:47 +08:00
xuxueli bce7cc4676 精简项目,取消第三方依赖,如 commons-collections4 ; 2019-01-09 11:23:18 +08:00
xuxueli cc31669821 项目依赖升级至较新稳定版本,如spring、jackson、groovy等等; 2019-01-09 10:59:57 +08:00
xuxueli 99cf79e3de 更新RM 2019-01-04 18:44:56 +08:00
xuxueli 56cf70a570 更新RM 2018-12-22 11:22:04 +08:00
xuxueli 87a0384d5a 更新RM 2018-12-22 11:14:44 +08:00
xuxueli bd30a59eb2 更新RM 2018-12-07 10:13:19 +08:00
xuxueli 2ef9fc11cc 更新RM 2018-12-07 10:11:55 +08:00
xuxueli 00e10238a7 更新RM 2018-12-03 12:35:48 +08:00
xuxueli 87c3a6c137 更新RM 2018-12-01 23:51:33 +08:00
xuxueli 25c53079ed 更新RM 2018-11-27 09:08:26 +08:00
xuxueli 50c19f6923 更新RM 2018-11-26 13:29:29 +08:00
xuxueli d3f50dfb38 记住密码功能优化,选中时永久记住;非选中时关闭浏览器即登出; 2018-11-21 18:05:23 +08:00
xuxueli 54a4a75a56 更新RM 2018-11-13 10:41:23 +08:00
xuxueli 900ae92b61 大表索引优化 2018-11-10 16:28:56 +08:00
xuxueli e9d2f059a4 更新RM 2018-11-10 15:49:26 +08:00
xuxueli 1aa17c9f9a 任务告警逻辑调整,改为通过扫描失败日志方式触发。一方面精确扫描失败任务,降低扫描范围;另一方面取消内存队列,降低线程内存消耗; 2018-11-10 15:21:30 +08:00
xuxueli 502e650300 调度中心告警邮件发送组件改为 “spring-boot-starter-mail”; 2018-11-10 11:34:21 +08:00
xuxueli 715a407544 升级开发分支:2.0.2 2018-11-09 10:40:44 +08:00
xuxueli 6dfa5eb21a 发布正式版本:2.0.1 2018-11-09 09:58:35 +08:00
xuxueli d177ad1769 更新RM 2018-11-09 09:39:13 +08:00
xuxueli 4be50f3126 更新RM 2018-11-09 09:38:43 +08:00
xuxueli a410b8465f 修复执行器启动之后jetty停止的问题; 2018-11-08 16:11:58 +08:00
xuxueli b05620a858 修复执行器启动之后jetty停止的问题; 2018-11-08 14:25:36 +08:00
xuxueli 11999f0a27 底层通讯组件升级,修复通讯异常时无效等待的问题; 2018-11-07 13:26:33 +08:00
xuxueli 2337f8ef42 freemarker对数字默认加千分位问题修复,解决日志ID被分隔导致查看日志失败问题; 2018-11-07 09:08:13 +08:00
xuxueli 92d5004411 调度报表日期分布图默认值统一 2018-11-06 09:08:09 +08:00
xuxueli 2e27775732 左侧菜单折叠动画问题修复 2018-11-06 08:47:28 +08:00
xuxueli f222b67ee5 更新RM 2018-11-04 03:33:13 +08:00
xuxueli bdb45c6426 更新RM 2018-11-04 03:27:33 +08:00
xuxueli dd3f6d74f9 升级开发分支:v2.0.1-SNAPSHOT 2018-11-04 03:14:14 +08:00
xuxueli 6b8ab29755 更新RM 2018-11-04 03:07:52 +08:00
xuxueli a846b72c14 更新RM 2018-11-04 03:00:46 +08:00
xuxueli 838263cc3b 更新RM 2018-11-04 02:22:46 +08:00
xuxueli bba3307c9c Docker 部署文档 2018-11-04 01:21:17 +08:00
xuxueli b990724e5f Release 版本:2.0.0 2018-11-04 00:56:23 +08:00
xuxueli 78a1bbd5d5 多项UI组件升级到最新版本 2018-11-04 00:39:47 +08:00
xuxueli 5048011fa7 多项UI组件升级到最新版本 2018-11-03 23:32:26 +08:00
xuxueli 25f5ac3eee 多项UI组件升级到最新版本 2018-11-03 23:13:15 +08:00
xuxueli 16b6a6119c 多项UI组件升级到最新版本 2018-11-03 23:08:12 +08:00
xuxueli de8888036c 多项UI组件升级到最新版本 2018-11-03 23:03:29 +08:00
xuxueli b209f5a429 更新RM 2018-11-03 22:42:05 +08:00
xuxueli dc38be9eb8 更新RM 2018-11-03 22:33:44 +08:00
xuxueli 4f6fdc70cc 子任务失败重试重试逻辑优化,子任务失败时将会按照其预设的失败重试次数主动进行重试 2018-11-03 22:17:46 +08:00
xuxueli e6d23c0400 更新RM 2018-11-03 21:57:55 +08:00
xuxueli 2fb7ab025f 项目依赖升级 groovy 至较新稳定版本;pom清理; 2018-11-02 19:02:53 +08:00
xuxueli 1427644853 命令行任务:原生提供通用命令行任务Handler(Bean任务,"CommandJobHandler");业务方只需要提供命令行即可; 2018-11-02 13:18:39 +08:00
xuxueli f62a30a28b - 任务状态优化,仅运行状态"NORMAL"任务关联至quartz,降低quartz底层数据存储与调度压力;
- 任务状态规范:新增任务默认停止状态,任务更新时保持任务状态不变;
2018-11-02 10:53:24 +08:00
xuxueli df2b9f7e0c - 组件化优化,移除对 spring 的依赖:非spring应用选用 "XxlJobExecutor" 、spring应用选用 "XxlJobSpringExecutor" 作为执行器组件;
- 任务RollingLog展示逻辑优化,修复超时任务无法查看的问题;
2018-11-01 10:35:54 +08:00
xuxueli af6c46743f 新增无框架执行器Sample示例项目 "xxl-job-executor-sample-frameless"。不依赖第三方框架,只需main方法即可启动运行执行器; 2018-11-01 09:21:19 +08:00
xuxueli 81a3bb087d 更新RM 2018-10-28 04:22:24 +08:00
xuxueli 443c946e55 - 1、调度中心迁移到 springboot;
- 2、底层通讯组件迁移至 xxl-rpc;
2018-10-28 04:09:16 +08:00
xuxueli 3568340cc2 maven 配置精简 2018-10-27 22:42:47 +08:00
xuxueli 0142b353b5 任务新增的API服务接口返回任务ID,方便调用方实用; 2018-10-27 21:39:32 +08:00
xuxueli 8540354f52 更新RM 2018-10-25 18:10:43 +08:00
xuxueli bf477c2c0a 更新RM 2018-10-25 09:40:43 +08:00
xuxueli b00ec32e16 IP获取逻辑优化,优先遍历网卡来获取可用IP; 2018-10-24 14:32:46 +08:00
xuxueli aa14942729 更新RM 2018-10-22 09:45:44 +08:00
xuxueli 0492cebb2e 更新RM 2018-10-18 16:25:42 +08:00
xuxueli 80d4ddd06a 更新RM 2018-10-08 20:43:53 +08:00
xuxueli 7d62145286 Merge branch 'master' 2018-10-08 20:34:13 +08:00
xuxueli 1a02e2e19b 更新RM 2018-10-08 19:24:45 +08:00
xuxueli 23c549a3b6 更新RM 2018-10-06 00:22:52 +08:00
xuxueli 00f796118b 升级开发分支:2.0.0-SNAPSHOT 2018-10-05 23:25:21 +08:00
xuxueli 34ad0eeca1 v1.9.2 Release 2018-10-05 16:20:15 +08:00
xuxueli f7631f11a5 docker支持:调度中心提供 Dockerfile 方便快速构建docker镜像; 2018-10-05 15:45:55 +08:00
xuxueli f4576a3705 更新RM 2018-10-05 14:15:46 +08:00
xuxueli 82ab6bf67e 更新RM 2018-10-05 13:12:52 +08:00
xuxueli 28b8e40d7a 更新RM 2018-09-25 00:01:57 +08:00
xuxueli 34ca7abf5b 更新RM 2018-09-24 23:37:01 +08:00
xuxueli 78e135200c 项目依赖全量升级至较新稳定版本,如spring、Jackson、groovy等等; 2018-09-24 23:26:13 +08:00
xuxueli 39a07e722f 更新RM 2018-09-24 03:02:38 +08:00
xuxueli def7afa92f 任务监控线程Log输出优化,运行中任务的监控Log改为debug级别,减少非核心日志量; 2018-09-24 01:05:12 +08:00
xuxueli b4ec631c78 GLUE任务脚本字段类型调整,改为mediumtext类型,提高GLUE长度上限; 2018-09-24 00:50:34 +08:00
xuxueli 6b7608efe8 任务执行日志、调度日志字段类型调整,改为text类型并取消字数限制; 2018-09-24 00:39:19 +08:00
xuxueli e8640f5f32 更新RM 2018-09-23 23:59:07 +08:00
xuxueli 17f8ad0641 任务失败重试:支持自定义任务失败重试次数,当任务失败时将会按照预设的失败重试次数主动进行重试;其中分片任务支持分片粒度的失败重试; 2018-09-23 23:06:30 +08:00
xuxueli 585ab5eb57 更新RM 2018-09-23 23:03:57 +08:00
xuxueli f580debbb9 更新RM 2018-09-23 21:26:24 +08:00
xuxueli 146179d384 线程优化调整 2018-09-23 21:20:31 +08:00
xuxueli 67fc5a1895 任务触发时支持动态传参,调度中心与API服务均提供提供动态参数功能 2018-09-23 20:27:24 +08:00
xuxueli 5ea383c93e 任务参数数据框调整,手动触发时支持动态输入参数; 2018-09-23 19:36:34 +08:00
xuxueli 54fce811eb 分片任务失败重试优化,仅重试当前失败的分片; 2018-09-23 02:51:33 +08:00