PowerJob:一款强大且开源的分布式调度与计算框架
生活随笔
收集整理的這篇文章主要介紹了
PowerJob:一款强大且开源的分布式调度与计算框架
小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
項目名稱:PowerJob
項目作者:假詩人
開源許可協(xié)議:Apache-2.0
項目地址:https://gitee.com/KFCFans/PowerJob
項目簡介
PowerJob(原OhMyScheduler)是全新一代分布式調度與計算框架,其主要功能特性如下:
- 使用簡單:提供前端Web界面,允許開發(fā)者可視化地完成調度任務的管理(增、刪、改、查)、任務運行狀態(tài)監(jiān)控和運行日志查看等功能。
- 定時策略完善:支持CRON表達式、固定頻率、固定延遲和API四種定時調度策略。
- 執(zhí)行模式豐富:支持單機、廣播、Map、MapReduce四種執(zhí)行模式,其中Map/MapReduce處理器能使開發(fā)者寥寥數行代碼便獲得集群分布式計算的能力。
- 執(zhí)行器支持廣泛:支持Spring Bean、內置/外置Java類、Shell、Python等處理器,應用范圍廣。
- 運維便捷:支持在線日志功能,執(zhí)行器產生的日志可以在前端控制臺頁面實時顯示,降低debug成本,極大地提高開發(fā)效率。
- 依賴精簡:最小僅依賴關系型數據庫(MySQL/PostgreSQL/Oracle/MS SQLServer...)
- 高可用&高性能:調度服務器經過精心設計,一改其他調度框架基于數據庫鎖的策略,實現了無鎖化調度。部署多個調度服務器可以同時實現高可用和性能的提升(支持無限的水平擴展)。
- 故障轉移與恢復:任務執(zhí)行失敗后,可根據配置的重試策略完成重試,只要執(zhí)行器集群有足夠的計算節(jié)點,任務就能順利完成
適用場景
- 有定時執(zhí)行需求的業(yè)務場景:如每天凌晨全量同步數據、生成業(yè)務報表等。
- 有需要全部機器一同執(zhí)行的業(yè)務場景:如使用廣播執(zhí)行模式清理集群日志。
- 有需要分布式處理的業(yè)務場景:比如需要更新一大批數據,單機執(zhí)行耗時非常長,可以使用Map/MapReduce處理器完成任務的分發(fā),調動整個集群加速計算。
同類產品對比
項目截圖
腳本處理器的簡單試用:在任務管理界面直接創(chuàng)建任務,將腳本內容復制進去即可。Java 處理器的試用
總結
以上是生活随笔為你收集整理的PowerJob:一款强大且开源的分布式调度与计算框架的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: ES6中的模板字符串---反引号``
- 下一篇: 水平居中布局与滚动条跳动