官宣!Taier1.3新版本正式發佈,新鮮功能搶先體驗

来源:https://www.cnblogs.com/DTinsight/archive/2022/11/08/16869217.html
-Advertisement-
Play Games

2022年11月7日,Taier1.3版本正式發佈! Taier 是一個大數據分散式可視化的DAG任務調度系統,旨在降低ETL開發成本、提高大數據平臺穩定性,大數據開發人員可以在 Taier 直接進行業務邏輯的開發,而不用關心任務錯綜複雜的依賴關係與底層的大數據平臺的架構實現,將工作的重心更多地聚焦 ...


2022年11月7日,Taier1.3版本正式發佈!

Taier 是一個大數據分散式可視化的DAG任務調度系統,旨在降低ETL開發成本、提高大數據平臺穩定性,大數據開發人員可以在 Taier 直接進行業務邏輯的開發,而不用關心任務錯綜複雜的依賴關係與底層的大數據平臺的架構實現,將工作的重心更多地聚焦在業務之中。

Taier自今年2月份開源之後,得到了社區開發者的廣泛支持,我們積極吸收社區開發者的意見建議,不斷迭代版本,目前已發佈了Taier1.1、Taier1.2這兩個大的版本更新。

本次發佈的Taier1.3版本,我們新增了Flink Standalone組件,融合了DataSourceX的模塊,並新增了Python、Shell、ClickHouse、Doris SQL等多種任務,任務數據源綁定,任務支持指定隊列運行,併進行了部署優化,同時對官網社區的UI進行了全新的升級改造。

目前新版本已在Github與Gitee上線,同時使用文檔也在社區推送,大家可以隨時下載查閱,歡迎大家前往體驗(喜歡我們的項目歡迎大家點個Star),體驗地址:

Github:

https://github.com/DTStack/Taier

Gitee:

https://gitee.com/dtstack_dev_0/taier

社區官網:

https://dtstack.github.io/Taier/

同時為了方便沒有釘釘的開發者們更好的交流Taier開源技術,我們新建了Taier開源技術微信交流群,歡迎大家加入一起探討開源技術~

file

Taier1.3版本詳解

新增Flink Standalone組件,可以通過Flink Standalone使用Flink SQL、數據同步、實時採集等任務相關功能。移除Taier對Hadoop組件的強依賴,支持輕量化的數據處理。

file

02 DataSourceX融合

Taier融合DataSourceX模塊,移除Taier外部插件依賴。新增數據源插件相關特性,支持後續Taier對接更多的RDBMS類型的SQL任務。

03 新增Python、Shell任務

新增Script組件,支持Python、Shell任務類型,可以在Taier上通過腳本類型任務進行操作。

file

file

04 新增ClickHouse、Doris SQL任務

新增ClickHouse、Doris SQL任務類型,支持數據同步腳本模式到ClickHouse、Doris,再進行任務調度處理。

05 任務數據源綁定

控制台組件移除SQL類型組件配置,SQL任務直接和數據源互相綁定,支持任務和數據源一對一的執行,將SQL執行域細分到具體的單個數據源。

file

06 任務支持指定隊列運行

Hadoop類型任務支持指定隊列運行,隊列資源隔離細分到任務級別。

07 部署優化

Taier優化單機部署,優化前後端部署操作,簡化docker鏡像部署流程,降低上手難度。

08 官網升級

Taier社區新官網上線,UI設計全面升級。

file

後續版本規劃

Taier今年更新了3個大的版本,按照社區規劃,後續版本我們計劃重點圍繞關鍵點:

● 完善Taier Datasource 模板支持SQL任務

● HadoopMR、Spark Jar、PySpark 任務支持

● 任務告警

● Windows開發環境適配

我們歡迎社區的開發者們一起參與到Taier的版本建設中來,同時大家如果有其他的意見建議也可以給我們提一個Issue或者PR,大家可以來一起探討怎麼更好的共建項目。感興趣的小伙伴們可以加入我們的技術交流社群,一起交流Taier的技術問題及難點,共建Taier!

袋鼠雲開源框架釘釘技術交流qun(30537511),歡迎對大數據開源項目有興趣的同學加入交流最新技術信息,開源項目庫地址:https://github.com/DTStack/Taier


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 大家好,我是沙漠盡頭的狼。 .NET是免費,跨平臺,開源,用於構建所有應用的開發人員平臺。 本文演示如何在WPF中使用Blazor開發漂亮的UI,為客戶端開發註入新活力。 註 要使WPF支持Blazor,.NET版本必須是 6.0 或更高版本,本文所有示例使用的.NET 7.0,版本要求見鏈接,截圖 ...
  • 各位好啊,我是會編程的蝸牛,作為java開發者,我們平常肯定會接觸Linux操作系統,其實除了一般的部署應用外,它還可以幫助我們生成密碼。解決我們平常自己想各種複雜密碼的煩惱,以後我會講一講如何安全地保存我們的密碼。 ...
  • 安裝Docker Docker 分為 CE 和 EE 兩大版本。CE 即社區版(免費,支持周期 7 個月),EE 即企業版,強調安全,付費使用,支持周期 24 個月。 Docker CE 分為 stable test 和 nightly 三個更新頻道。 官方網站上有各種環境下的 安裝指南,這裡主要介 ...
  • 一、Installing RabbitMQ-3.10.2 on CentOS 7.9 1 地址 https://www.rabbitmq.com https://github.com/rabbitmq/rabbitmq-server https://github.com/rabbitmq/rabbi ...
  • 蘋果電腦哪款系統活動監控器好用呢?iStat Menus for mac是一款Mac OS電腦硬體信息監控軟體,提供的信息包括 CPU 使用情形、記憶體用量、硬碟使用情形、網路傳輸、機器溫度、風扇轉速等等。在新版本中,您還可以自由的對iStat Menus顯示的信息進行設置,將您關註的系統信息放在頂部 ...
  • redis集群搭建 一、安裝redis 源碼安裝: 1.下載源碼包: wget http://download.redis.io/releases/redis-6.0.7.tar.gz 2.解壓到指定目錄下: tar xf redis-6.0.7.tar.gz -C /usr/local/ 二、編譯 ...
  • 背景 建議至少提交兩份測試報告(從一、二選擇兩個測試case) 一、任選一(建議結合業務選擇,簡單線上業務選tpcb,複雜線上業務選tpcc,偏分析業務選tpch) tpcc tpcb tpch 二、任選一(建議結合業務場景選擇) 並行計算,選擇 RDS PG 12 進行測試 GIS,選擇 RDS ...
  • GreatSQL社區原創內容未經授權不得隨意使用,轉載請聯繫小編並註明來源。 GreatSQL是MySQL的國產分支版本,使用上與MySQL一致。 作者:YeJinrong/葉金榮 意外發現USER()和CURRENT_USER()的一點不同。 某次在用 ALTER USER 想要修改賬戶密碼時,發 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...