直播報名| Kylin on Parquet 介紹及快速上手

来源:https://www.cnblogs.com/kyligence/archive/2020/04/12/live-registration-introduction-and-quick-start-of-apache-kylin-on-apache-parquet.html
-Advertisement-
Play Games

熟悉的 Kylin 的朋友都知道,Apache Kylin 構建完的數據是存儲在 HBase 中的。Kylin on HBase 方案經過長時間的發展已經比較成熟,但是也還存在著一定的局限性。面對以上問題,Kyligence 推出了 Kylin On Parquet 方案。 ...


熟悉的 Kylin 的朋友都知道,Apache Kylin 構建完的數據是存儲在 HBase 中的。Kylin on HBase 方案經過長時間的發展已經比較成熟,但是也還存在著一定的局限性。Kylin 當前主要的計算是在單機節點完成的,存在單點問題。而且由於 HBase 非真正列存的問題,Cuboids 信息需要壓縮編碼,讀取 HBase 數據的時候再反序列化、分割,額外增加了計算壓力。另外,HBase 運維難度比較大,不便於上雲。面對以上問題,Kyligence 推出了 Kylin On Parquet 方案。

Kyligence 在 2018 年開始策劃 Kylin On Parquet 方案,在 Kylin 商業版中驗證了方案的可行性和優勢,如今便貢獻回開源社區。Kylin On Parquet 依托 Spark,能夠做到分散式計算,不再存在單點瓶頸,調試也會更加方便。並且去 Hadoop,只需依賴 Spark,能夠很好的支持雲上存儲和部署。


目前,Kylin on Parquet 源碼已經開源:https://github.com/Kyligence/kylin-on-parquet-v2。

在本次直播中,來自 Kyligence 的大數據研發工程師王汝鵬將帶大家快速瞭解 Kylin on Parquet 的架構、原理以及如何開發調試代碼。

 

Kylin Online 第  4 

Kylin on Parquet 介紹及快速上手

 

活動亮點

1. Kylin on Parquet 方案的架構介紹、原理講解,以及與 Kylin 原有構建查詢引擎的性能比較。

2. Live Demo 帶您瞭解如何使用、開發與調試 Parquet 代碼。

3. Q&A 環節為您答疑解惑,您也有機會獲贈「Kylin 權威指南」~

 

哪些人應該參加

1. 想嘗鮮 Kylin 最新一代存儲方式,希望與志同道合的 Kylin Contributor 們一起探討與參與 Kylin  on Parquet 開發。

2. 有興趣瞭解下一代 Kylin 面向雲原生 OLAP 引擎的架構原理。

 

直播時間

4 月 18 日(下周六)  20:00 – 21:00

 

關於講師

王汝鵬,Kyligence 公司大數據研發工程師,Apache Kylin Contributor,目前主要負責開源 Kylin 構建引擎的維護和 Kylin on Parquet 的開源工作。

 

如何報名

↓掃描下方二維碼報名↓

QR CODE

報名截止時間:4 月 18 日(下周六)  12:00

報名前請認真閱讀下方報名提示,以免錯過直播:

1. 本次活動的所有信息將通過郵件、活動微信群與您同步,務必正確填寫郵箱及電話。

2. 活動中參與互動,將有機會 pick 隨機掉落的精美社區周邊以及書籍哦~

 

瞭解更多大數據資訊,點擊進入Kyligence官網


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • Yum 軟體倉庫的作用是為了進一步簡化 RPM 管理軟體的難度以及自動分析 所需軟體包及其依賴關係的技術。 可以把 Yum 想象成是一個碩大的軟體倉庫,裡面保存有幾乎所 有常用的工具 。 第1步:進入到/etc/yum.repos.d/目錄中(因為該目錄存放著 Yum 軟體倉庫的配置文件)。 第2步 ...
  • 一 故障指南 1.1 常見問題排障 為了跟蹤和發現在Kubernetes集群中運行的容器應用出現的問題,常用如下查錯方法: 查看Kubernetes對象的當前運行時信息,特別是與對象關聯的Event事件。這些事件記錄了相關主題、發生時間、最近發生時間、發生次數及事件原因等,對排查故障非常有價值。此外 ...
  • 本文源碼: "GitHub·點這裡" || "GitEE·點這裡" 一、PostgreSQL簡介 1、資料庫簡介 PostgreSQL是一個功能強大的開源資料庫系統,具有可靠性、穩定性、數據一致性等特點,且可以運行在所有主流操作系統上,包括Linux、Unix、Windows等。PostgreSQL ...
  • 無論你是做資料庫運維還是資料庫開發,都是圍繞著資料庫吃飯。然而隨著計算和數據上雲的趨勢快速發展,計算和存儲資源池化帶來了系統設計的顛覆,傳統資料庫步履蹣跚。 另一方面,隨著“國產風”和“去IOE化”的吹起,國內金融、數字政府、電信等行業快速數字化轉型,數據存儲與管理成為行業數字化轉型迫切需要解決的問 ...
  • 問題描述: 現在我刪除最後一條記錄: 再加上一條新記錄: 發現,記錄的id不是4而是5. 問題解釋: 這是因為作為主鍵而不得有重覆的id值,就算是刪掉了,因為設置了auto_increment,為了保持id的自增,他只會接著自己的增長記錄走,而不管記錄中的每一個值是否還存在. 辦法: 刪除該列表的主 ...
  • 基礎概念簡述 鎖 資料庫通過鎖機制來解決併發場景 — 共用鎖(讀鎖)和排他鎖(寫鎖)。讀鎖是不阻塞的,多個客戶端可以在同一時刻讀取同一個資源;寫鎖是排他的,並且會阻塞其他的讀鎖和寫鎖。 簡單提下樂觀鎖和悲觀鎖: 樂觀鎖:通常用於數據競爭不激烈的場景,多讀少寫,通過版本號和時間戳實現 悲觀鎖:通常用於 ...
  • 什麼是索引 MySQL 官方對索引的定義:索引(Index)是幫助 MySQL高效獲取數據的數據結構。因此 索引的本質就是數據結構 。索引的目的在於提高查詢效率,可類比字典、書籍的目錄等這種形式。 可簡單理解為 排好序的快速查找數據結構 。在數據之外,資料庫系統還維護著 滿足特定演算法查詢的數據結構 ...
  • 本篇文章主要是寫一下我在配置redis時遇到的坑,安裝redis的教程可以查看這篇文章:https://www.cnblogs.com/wuwuyong/p/11697643.html; 1.第一個坑是在刪除redis的時候報錯: D:\redis\Redis x64 3.2.100 redis s ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...