PowerJob/README.md

简介

产品介绍

OhMyScheduler是一个分布式调度平台和分布式计算框架

• 支持CRON、固定频率、固定延迟和API四种定时策略
• 支持单机、广播、MapReduce三种执行模式
• 支持任意的水平扩展，性能强劲无上限
• 仅依赖数据库，部署简单，上手容易，开发高效，仅需几行代码即可获得整个集群的分布式计算能力。
• 支持SpringBean、普通Java类（内置/外置）、Shell、Python等处理器

部署

环境要求

• 运行环境：JDK8+
• 编译环境：Maven3+
• 数据库：Spring Data JPA支持的关系型数据库理论上都可以（MySQL/Oracle...）

项目部署

1. 部署数据库：由于调度Server数据持久化层基于Spring Data Jpa实现，开发者仅需完成数据库的创建，即运行SQLCREATE database if NOT EXISTS oms default character set utf8mb4 collate utf8mb4_unicode_ci;
2. 部署调度服务器（oh-my-scheduler-server）：修改配置文件（application.properties），按需修改，之后maven打包部署运行一条龙。
3. 部署前端页面（可选，server多实例部署时需要），自行使用源码打包部署即可。
4. 被调度任务集成oh-my-scheduler-worker依赖，并完成处理器的开发，详细教程见开发文档。

开发日志

已完成

• 定时调度功能：支持CRON表达式、固定时间间隔、固定频率和API四种方式。
• 任务执行功能：支持单机、广播和MapReduce三种执行方式。
• 执行处理器：支持SpringBean、普通Java对象、Shell脚本、Python脚本的执行
• 高可用与水平扩展：调度服务器可以部署任意数量的节点，不存在调度的性能瓶颈。
• 不怎么美观但可以用的前端界面

待开发

• 工作流（任务编排）：当前版本勉强可以用MapReduce代替，不过工作流挺酷的，等框架稳定后进行开发。
• 应用级别资源管理和任务优先级：没有机器资源时，进入排队队列。不过我觉得SchedulerX的方案不太行，SchedulerX无抢占，一旦低优先级任务开始运行，那么只能等他执行完成才能开始高优先级任务，这明显不合理。可是考虑抢占的话又要多考虑很多东西...先放在TODO列表吧。

参考

Alibaba SchedulerX 2.0

• Akka 框架：不得不说，akka-remote简化了相当大一部分的网络通讯代码。
• 执行器架构设计：这篇文章反而不太认同，感觉我个人的设计更符合Yarn的“架构”。
• MapReduce模型：想法很Cool，大数据处理框架都是处理器向数据移动，但对于传统Java应用来说，数据向处理器移动也未尝不可，这样还能使框架的实现变得简单很多。
• 广播执行：运行清理日志脚本什么的，也太实用了8～