Openjob 1.0.5 發佈,新增 Agent

来源:https://www.cnblogs.com/stelin/archive/2023/07/24/17576414.html
-Advertisement-
Play Games

將本地的改動極速同步到遠程服務端,並自動生效,掌握此技能,開發調試會更高效 ### 歡迎訪問我的GitHub > 這裡分類和彙總了欣宸的全部原創(含配套源碼):[https://github.com/zq2599/blog_demos](https://github.com/zq2599/blog_ ...


什麼是 Openjob? Openjob 基於Akka架構的新一代分散式任務調度框架。支持多種定時任務、延時任務、工作流設計,採用無中心化架構,底層使用一致性分片演算法,支持無限水平擴容。
  • 完善的任務日誌存儲,支持 H2/Mysql/oracle/Postgresql/Elasticsearch
  • 任務運行堆棧功能可詳細記錄任務運行過程,幫助管理員快速排查問題
  • 報警與許可權功能也極為重要,它提供任務事件監控報警,以及詳細的報警歷史記錄
  • 管理員可以使用企業微信、飛書、webhook等渠道接收報警信息。 
  • 命名空間方式設計,支持按鈕級別許可權管理,輕鬆應對複雜的項目管理。
  • 支持多種編程語言,如 Java,Go,PHP 和 Python,各個語言的支持度都非常友好。
如果您正在尋找一款高性能的分散式任務調度框架,支持定時任務、延時任務、輕量級計算、工作流編排,並且支持多種編程語言,那麼 Openjob 肯定是不二之選。 特性 Openjob 除了支持基本的任務調度,還提供延時任務、分散式計算以及工作流。 定時任務
  • 普通定時任務,支持Unix Crontab 表達式。
  • 秒級定時任務,適用於對實時性要求比較高的業務,例如執行間隔為3秒的定時調度任務。
  • 固定頻率任務,Crontab 必須被 60 整除,不支持其它數量級時間間隔的任務,一般用於定期輪詢場景。
延時任務
  • 基於 Redis 實現高性能延時任務,一體化解決定時任務和延時任務,同時提供豐富的報表與統計。
分散式計算
  • 單機,隨機選擇一臺機器完成任務執行。
  • 廣播,應用所有機器同時執行且等待全部結束。
  • Map模型,類似於 Hadoop 的Map。只需簡單實現一個Map方法,就可以將海量數據分佈到多台機器上執行。
  • MapReduce模型,MapReduce模型是Map模型的擴展。所有子任務執行完成後執行Reduce方法,可以在Reduce方法中處理任務運行結果和數據。
  • 靜態分片,類似Elastic-Job模型,控制台配置分片數,可以按照分片分配到不同的客戶端執行,支持多語言版本。
執行器
  • 普通執行器,普通函數或類的方式執行任務
  • HTTP,定時請求固定的地址。
  • Shell,定時執行 shell 腳本
可視化運維
  • 任務儀錶盤,豐富的任務統計和報表。
  • 任務歷史執行記錄,任務執行歷史追溯。
  • 任務運行日誌,完善的任務日誌存儲(H2/Mysql/Elasticsearch)
  • 任務運行堆棧,詳細記錄任務運行堆棧信息。
報警與許可權
  • 提供任務事件監控報警,以及詳細的報警歷史,同時支持企業微信、飛書、webhook觸達通知。
  • 命名空間方式設計,支持按鈕級別許可權管理,輕鬆應對複雜的項目管理。
多語言
  • Java 及其衍生框架,原生支持。
  • Go 支持 go mod 方式安裝依賴,以及常見框架整合(Gin)。
  • PHP 支持通過 Golang agent 方式執行 PHP 任務。基於 Swoole 衍生框架(Swoft),支持 Composer 安裝依賴直接使用。
  • Python 支持通過 Golang agent,方式執行 Python 任務。
適用場景 Openjob 適用於業務有一定的定時任務需求,非常適用於定時任務與延時任務一體化解決場景,比如每天凌晨數據清理、生成數據報表。同時適用於輕量級計算,可以使用 Map/MapReduce 實現分散式數據計算。對於複雜的任務流或任務編排場景可以使用可視化工作流,輕鬆解決。 開源對比
項目 Quartz Elastic-Job XXL-JOB Openjob
定時調度 Cron Cron Cron
  • 定時任務
  • 秒級任務
  • 一次性任務
  • 固定頻率
延時任務 不支持 不支持 不支持 基於 Redis 實現分散式高性能延時任務,實現定時與延時一體化
任務編排 不支持 不支持 不支持 通過圖形化編排任務(workflow)
分散式計算 不支持 靜態分片 廣播
  • 廣播
  • Map/MapReduce
  • 多語言靜態分片
多語言 Java
  • Java
  • 腳本任務
  • Java
  • 腳本任務
  • Java
  • Go(Gin、beego)
  • PHP(Swoft)
  • Python(Agent)
  • 腳本任務
  • HTTP任務
可視化
  • 歷史記錄
  • 運行日誌(不支持存儲)
  • 監控大盤
  • 歷史記錄
  • 運行日誌(支持 H2/Mysql/Oracle/Postgresql/Elasticsearch)
  • 監控大盤
  • 操作記錄
  • 查看日誌堆棧
可運維 啟用、禁用任務
  • 啟用、禁用任務
  • 手動運行任務
  • 停止任務
  • 啟用、禁用任務
  • 手動運行任務
  • 停止任務
報警監控 郵件 郵件
  • 郵件
  • webhook
  • 企微
  • 飛書
性能 每次調度通過DB搶鎖,對DB壓力大 ZooKeeper是性能瓶頸 由Master節點調度,Master節點壓力大。 任務採用分片演算法,每個節點都可以調度,無性能瓶頸,支持無限水平擴展,支持海量任務調度。  
更新內容 Openjob v1.0.5 新增 Agent 以及修複若幹已知問題。
[root@openjob ~]$ java -jar openjob-agent-java-xxx.jar -h
Usage: Openjob-agent-java [-hV] [-s=<serverAddress>]
                          [--worker-app-name=<workerAppName>]
                          [--worker-heartbeat-fail-times=<heartbeatFailTimes>]
                          [--worker-heartbeat-interval=<heartbeatInterval>]
                          [--worker-host=<workerHost>]
                          [--worker-port=<workerPort>]
  -h, --help      Show this help message and exit.
  -s, --server-address=<serverAddress>
                  Server address, default is `http://localhost:8080`
  -V, --version  Print version information and exit.
      --worker-app-name=<workerAppName>
                  Application name, default is `openjob`
      --worker-heartbeat-fail-times=<heartbeatFailTimes>
                  Worker heartbeat fail times, default is `2`
      --worker-heartbeat-interval=<heartbeatInterval>
                  Worker heartbeat interval, default is `5`
      --worker-host=<workerHost>
                  Worker host, default is local IP
      --worker-port=<workerPort>
                  Worker port, default is `25588`

 

新增 修複
  • [#137] 客戶端心跳異常退出
  • [#137] unix 平臺終止 Kettle 
優化
  • [#139] 任務實例狀態上報
  • [#139] 延時實例狀態上報
更多內容
  • openjob
  • openjob.io
  • QQ交流群: 849015265
 
您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • [TOC](【後端面經-Java】String與StringBuffer與StringBuilder的比較) ## 1. String 1. 不可變 查看`String`源碼如下: ```java public final class String implements java.io.Serial ...
  • golang的泛型已經出來了一年多了,從提案被接受開始我就在關註泛型了,如今不管是在生產環境還是開源項目里我都寫了不少泛型代碼,是時候全面得回顧下golang泛型的使用體驗了。 先說說結論,好用是好用,但問題也很多,有些問題比較影響使用體驗,到了不吐不快的地步了。 這篇文章不會教你泛型的基礎語法,並 ...
  • 最近在寫代碼時發現一個很有意思的問題 問題代碼: 1 // 1.準備一個集合,排序。 2 List<Movie> movies = new ArrayList<>(); 3 movies.add(new Movie("摔跤吧,爸爸", 9.5, "阿米爾汗")); 4 movies.add(new ...
  • 在Windows中, 將文件用滑鼠拖動到一個程式上面, 會有一句小提示: 用 xxx 打開(如下圖)。 它本質上就是運行程式時, 傳遞了一個文件路徑的命令行參數。 相當於這樣的命令: program.exe file_path 其中"program.exe"就是打開此文件用的程式, "file_pa ...
  • #### 前言 個人項目開發中,網站建設中需要用到大量的圖片以及用戶上傳的圖片,如果伺服器帶寬小,磁碟容量小將所有的圖片信息全部存儲在伺服器上不太現實,這裡建議將圖片數據存儲在對象存OSS上或者將圖片保存在圖床上,減少帶寬費用節約成本。 #### 項目環境 ``` SpringBoot:3.x JD ...
  • 簡介: 在現代軟體開發中,全球唯一標識符(UUID)在許多場景中發揮著重要的作用。UUID是一種128位的唯一標識符,它能夠保證在全球範圍內不重覆。在Go語言中,我們可以使用第三方庫`github.com/google/uuid`來方便地生成UUID。本文將介紹如何使用這個庫來生成不同版本的UUID ...
  • 睡不著閑逛,在GitHub上看到一個挺實用的開源項目:**Spring Startup Analyzer**。 從項目名稱中就大概能猜到,這是一個分析Spring應用啟動過程的工具。Spring Startup Analyzer通過採集Spring應用啟動過程的數據,進而生成一個互動式的分析報告,幫 ...
  • # 環境要求 - `Windows XP` 及以上。 - `Windows 10` 、 `Windows 11` 在 `Windows 功能` 中勾選 `.NET Framework 3.5 (包括 .NET 2.0 和 3.0)` 。 # 前置知識 ```VBScript WSH.Echo Emp ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...