問界低代碼平臺架構設計及業務實踐

內因：隨著之家業務快速發展，公司內部的數字化需求越來越多，信息系統團隊每年都面對大量的需求，但研發側資源是一定的，那麼如何更快速的交付需求，越來越成為團隊重點思考解決的問題。外因：互聯網技術的不斷推陳出新，尤其以React，Vue為代表的前端技術框架突飛猛進，大幅降低了可視化拖拽操作的技術門檻。... ...

1.前言

內因：隨著之家業務快速發展，公司內部的數字化需求越來越多，信息系統團隊每年都面對大量的需求，但研發側資源是一定的，那麼如何更快速的交付需求，越來越成為團隊重點思考解決的問題。

外因：互聯網技術的不斷推陳出新，尤其以React，Vue為代表的前端技術框架突飛猛進，大幅降低了可視化拖拽操作的技術門檻。

行業內低代碼平臺主要涉及表單，流程, 數據開發，BI工具，智能機器人等方向。

1.前言

2.問界低代碼平臺介紹

問界平臺，第一期鎖定了數據方向的主題進行建設開發。具體圍繞數據分析的以下5個場景：

數據建模場景：實現零代碼，可視化的拖拉拽方式數據建模;
數據開發場景：實現數據抽取，清洗加工，然後輸出到目標表等功能;
數據分析場景：通過BI解決多維度數據分析需求;
指標及維度規則場景：實現線上的計算公式、數據核算規則的配置及後端自動化核算;
數據質量監控場景：實現低代碼方式的數據監控，及既定規則的數據自動修複

3.問界平臺技術架構介紹

3.1

前端框架

前端框架選型React, React提供了組件化的編程思想，特別適合中大工程採用，另外考慮移動端RN的普及，所以整體採用React來實施。

前端框架一覽表：

3.2

後端框架

後端整體的技術架構基於Spring Cloud微服務框架，依托於雲平臺Asf ; 通過SkyWalking實現後端全鏈路調用鏈的監控。

3.2.後端框架

3.3

調度引擎

調度引擎選型方面，我們選擇了PowerJob開源的工作流調度引擎，目前市面上的調度引擎主要分為兩類，定時調度，代表性的調度引擎有quartz,xxlJob等，以及以Oozie,PowerJob等為代表的工作流調度引擎，考慮到數據開發場景的大量數據依賴任務，問界平臺選擇了PowerJob來負責底層的任務調度引擎，PowJob框架本身自帶流程引擎設計器。

3.4

ORM框架

採取自研的ORM框架（automis.orm）,相比Mybatis半自動化ORM框架,省去大量SQL腳本的編寫，框架底層增加大量常用的數據查詢方法，如自動載入為hash，自動格式化為交叉表等數據的查詢及彙總，小計合計的計算等。框架自動支持底層各類日誌的跟蹤分析，及數據緩存策略，如基於方法，基於腳本，基於路徑的數據緩存等。

問界低代碼平臺後續將繼續表單場景的低代碼化，基於當前支持動態實體多表的自動序列化。可以有效支持基於數據模型設計的表單數據自動映射與序列化；

3.5

運行機制

3.5.運行機制

4.問界低代碼場景介紹

4.1

數據建模場景

數據建模做為數據分析的基礎，問界提供了線上ER圖的設計，並且可以線上進行數據表，維度及度量名稱等的二次修改及調整，另外支持計算欄位及分組欄位等的高階配置；

計算欄位：支持聚合函數（sum/count/avg等）及計算公式（如：a+b-c*100）等的配置
分組欄位：支持時間、字元、數值類型的快速分組配置（類case when）

通過以上功能，普通的數據分析師完全可以通過零代碼的方式，完成線上數據模型設計，並通過後續的BI分析模塊進行下一步的數據分析。

► 4.1.1 線上ER圖的設計

4.1.1.線上ER圖的設計

► 4.1.2 計算欄位的可視化配置

4.1.2.計算欄位的可視化配置

► 4.1.3 分組欄位的可視化配置

4.1.3.分組欄位的可視化配置

4.2

數據開發場景

所有的數據分析，離不開基礎數據的加工，只有加工清洗後的數據，才具備分析的價值。

問界平臺目前已上線支持12個組件，其中4類腳本開發組件，用於線上直接數據腳本的編寫與開發，採用Monaco Editor 支持一定的SQL語法糖，支持mysql,SqlServer, hiveSQL, StarRockcs等資料庫腳本的編寫；另外提供7類數據專項開發組件，後續還會不斷進行新增擴充組件（如：API組件、腳本組件等）。

開發模塊運行機制：