ChunJun 1.16 Release版本即將發佈,bug 捉蟲活動邀您參與!

来源:https://www.cnblogs.com/DTinsight/archive/2023/03/01/17167365.html
-Advertisement-
Play Games

親愛的社區小伙伴們,歷時數月,我們很高興地宣佈,ChunJun 即將迎來 1.16 Release 版本的正式發佈。在新版本中,ChunJun 新增了一批常用功能,進行了多項功能優化和問題修複,併在用戶使用體驗上進行了極大地改善。有17位Contributor 為 ChunJun 提交了多項優化和修 ...


親愛的社區小伙伴們,歷時數月,我們很高興地宣佈,ChunJun 即將迎來 1.16 Release 版本的正式發佈。在新版本中,ChunJun 新增了一批常用功能,進行了多項功能優化和問題修複,併在用戶使用體驗上進行了極大地改善。有17位Contributor 為 ChunJun 提交了多項優化和修複,感謝因為有你們才讓 ChunJun 變得更好!

ChunJun 1.16 版本目前已經發佈到master,需要試跑一個月再發佈 release 版本。在 1.16 版本中,我們整理了項目 maven 依賴,優化了 FTP、JDBC 插件,增加了 Iceberg、Nebula 插件,對 ChunJun 的易用性、穩定性、高效性等各個方面進行了全面加強,歡迎大家使用體驗。

體驗地址

Github:

https://github.com/DTStack/chunjun

Gitee:

https://gitee.com/dtstack_dev_0/chunjun

社區官網:

https://dtstack.github.io/chunjun/

ChunJun 1.16 版本

重要更新

· 框架整體依賴的 Flink 版本升級至 1.16.1,維表插件依賴原生介面,在使用層面更加統一。

· 細化 github ci/cd 的 work flow 流程,保證開源版本代碼質量。

· 整理項目 maven 依賴,減少類衝突的可能,同時使項目依賴更加清晰。

· 優化 FTP 插件,提升 FTP 同步性能。

· 優化 JDBC 插件,提升 JDBC 同步性能。

· HBase 插件增加 TTL 超時時間。

· 增加 Iceberg 寫入插件。

· 增加 Nebula 插件,支持讀取、寫入、維表功能。

· HTTP 插件支持 data 數組。

· SQL 支持運行 Batch 模式。

問題修複

· 修複 client 端提交 k8s 任務時的異常。

· 修複維表在找不到數據時直接拋出異常的情況。

· 修複在 windows 環境下打包時,sh 腳本中換行為 \r,會導致在 linux 下運行示例腳本時異常。

· 修複 HBase 插件在類型轉化為 INT 時的異常。

· 修複 Flink CDC 在 SQL 模式下的運行異常。

· 修複 Orc 文件無法讀取 Timestamp 欄位的異常情況。

· 修複 Mongodb 常量異常。

捉蟲活動 · 找 bug

ChunJun 1.16 發佈到 master 以來,社區小伙伴陸陸續續提出了一些相關的問題。由於升級初期測試驗證的場景覆蓋不全,需要更多人的力量一起來幫忙驗證,發現和修複問題,同時1.12 上也仍然存在一些常見的使用問題。

因此 ChunJun 社區決定廣發英雄帖,邀請各路捉蟲達人,一起幫助 ChunJun 在穩定性上更上一層樓。我們也將送出智能音箱、星巴克禮品卡、藍牙耳機等多項好禮作為報答。

活動報名

將你使用 ChunJun 過程中遇到的 bug 提交到以下地址,提交的 issuse 和 pr 符合社區規範,且被驗證確認即可獲得豐厚獎勵。

到 ChunJun 提交 issuse:

https://github.com/DTStack/chunjun/issues

到 ChunJun 提交 Pr:

https://github.com/DTStack/chunjun/pulls

活動規範

issue 不強制要求中英文,但是 Pr commit 強制要求為英文。

issue 規範:

· 問題描述清晰準確,上下文詳細,包含具體的版本號/分支、提交參數、任務模式等,如果可以,請帶上具體的任務腳本;

· 異常信息及堆棧信息完整;

· 包含詳細清晰的復現步驟。

Pr 規範:
· Pr 內描述清楚設計思路及解決了什麼問題,如果有必要,請開一個 issue 將問題描述清楚;
· Commit 信息完整且清晰,且為英文;
· 新增方法、修改方法需要儘可能補充單測;
· 新增插件需要補充文檔,使用案例,儘可能補充 e2e 測試。

活動範圍&時間

活動範圍:

ChunJun 1.12 以及之後版本(包含即將發佈的 1.16)

活動時間:

2023年3月1日-2023年3月31日

活動積分

本次捉蟲活動採用積分賽制,bug 提交人將獲得不同的積分。

提交一個issuse:5積分

提交一個pr:15~30積分(以5分為一檔,以影響範圍、完整性及複雜度三個維度進行評判)

活動禮品

本次活動獲得 bug 積分可用來兌換精美禮品。

• 盲盒 * 1個:20個積分

• 水杯 * 1個:30個積分

• 三合一數據線 * 1個:40個積分

• 藍牙耳機 * 1個:60個積分

• 星巴克禮品卡 * 1張:80個積分

• 智能音箱 * 1個:120個積分

file

註:ChunJun 社區對本次活動有最終解釋權

特別鳴謝

感謝對本次版本發佈提供支持和幫助的社區朋友們,正是因為有你們的貢獻,才有 ChunJun 1.16 版本的問世,再次對你們表達最真誠的謝意。

以下為參與本次版本發佈的人員名單,他們分別是(首字母排序):

file

想瞭解或咨詢更多有關袋鼠雲大數據產品、行業解決方案、客戶案例的朋友,瀏覽袋鼠雲官網:https://www.dtstack.com/?src=szbky

同時,歡迎對大數據開源項目有興趣的同學加入「袋鼠雲開源框架釘釘技術qun」,交流最新開源技術信息,qun號碼:30537511,項目地址:https://github.com/DTStack


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 4. 容器中的服務創建與釋放 我們使用了 IoC 容器之後,服務實例的創建和銷毀的工作就交給了容器去處理,前面也講到了服務的生命周期,那三種生命周期中對象的創建和銷毀分別在什麼時候呢。以下麵的例子演示以下: 首先是新增三個類,用於註冊三種不同的生命周期: public class Service1 ...
  • ed中的替換命令s是 [address]s/pattern/replacement/flag sed和awk 都是面向字元流的。都是從文本文件中一次一行地讀取輸入 它們控制所做的工作時 所用的指令不同 sed的字元流定位對如何應用定址有重要影響。在ed中沒有指定地址的命令 隻影響當前行。sed遍歷文 ...
  • 前言 本文通過幾個簡單的示例,可以快速瞭解Makefile的基本使用方法,適用於編譯我們平時練習所編寫的小量代碼。 1. make命令 Makefile文件內容: all為目標,這裡沒有依賴的文件,這條命令是列印(echo)出“Hello Makefile”這行文字 all: echo "Hello ...
  • 安裝 WSL 2 查看可同時線上安裝的 Linux 發行版名稱 wsl -l -o # 或 wsl --list --online 安裝 WSL 2 命令 wsl --install # 此選項必需,以下選項按需選擇 --no-distribution # 且不安裝發行版 --distributio ...
  • 問題產生: 作者最近在搭建Hadoop+Hive集群時,將NameNode、DataNode、Rm全部部署到一臺物理機上,查詢量較大時連接掛掉。 問題定位: 使用JPS命令查看Metastore服務正常運行,hive2--Runjar掛掉。重啟之後,過段時間又會掛掉。 Linux 內核有個機制叫OO ...
  • 多表查詢(上) 一. 多表關係 在實際應用中,根據需求,設計的表結構之間存在聯繫,聯繫一般分為以下三種 一對多(多對一) 多對多 一對一 1. 一對多(多對一) 案例:部門與員工的關係,一個部門對應多個員工,一個員工對應一個部門。 實現:在多的一方建立外鍵,指向一的一方的主鍵 2. 多對多 案例:學 ...
  • 為了客觀、準確、有效地評估 TDengine 3.0 的性能指標,我們決定使用 TSBS(Time Series Benchmark Suite)作為基準性能測試平臺,針對 DevOps 場景的數據集對 TDengine 3.0 展開整體(包括寫入、查詢、存儲、資源消耗等)性能評估。 ...
  • MySQL中明確查詢語句的執行順序極其重要,瞭解執行順序才不至於犯一些簡單錯誤,例如having 後面是否可以使用 select 中重命名的列名等問題。另外SQL中實際使用最頻繁的就是查詢(Queing),要想寫出高質量、高性能的查詢語句,必須深入地瞭解SQL的邏輯查詢處理順序和機制。 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...