大公司都在做的大數據平臺,為你精選這一份書單

来源:https://www.cnblogs.com/xll1025/archive/2020/06/09/13081534.html
-Advertisement-
Play Games

​ 現如今每個公司都有自己的大數據平臺和大數據團隊,可以看出大數據建設在公司的重要地位,不管是用於做數據分析、BI還是做用於機器學習、人工智慧等領域,大數據都是基礎,海量數據成為了互聯網公司的重要資產。 今天這一份書單,我們將推薦幾本綜合介紹大數據平臺和技術棧的優質書籍,幫各位對大數據技術感興趣的小 ...


現如今每個公司都有自己的大數據平臺和大數據團隊,可以看出大數據建設在公司的重要地位,不管是用於做數據分析、BI還是做用於機器學習、人工智慧等領域,大數據都是基礎,海量數據成為了互聯網公司的重要資產。

今天這一份書單,我們將推薦幾本綜合介紹大數據平臺和技術棧的優質書籍,幫各位對大數據技術感興趣的小伙伴快速入門和學習大數據。

大數據技術棧系列書單

大數據技術原理與應用

(1) 概念篇:介紹當前緊密關聯的*新IT領域技術雲計算、大數據和物聯網。
(2) 大數據存儲與管理篇:介紹分散式數據存儲的概念、原理和技術,包括HDFS、HBase、NoSQL資料庫、雲資料庫。
(3) 大數據處理與分析篇:介紹MapReduce分散式編程框架、基於記憶體的分散式計算框架Spark、圖計算、流計算、數據可視化。
(4) 大數據應用篇:介紹基於大數據技術的推薦系統。

作者簡介

林子雨,北大博士,廈門大學電腦科學系老師,中國高校**"數字教師"的提出者和建設者。在資料庫、數據倉庫、數據挖掘、大數據、雲計算和物聯網等領域有著十多年的知識積累,對各個領域知識都有比較深入的瞭解,有比較寬泛的視野。

大數據平臺基礎架構指南

當前不乏大數據具體技術組件的書籍,但卻很少有從大數據平臺整體建設和產品形態的巨集觀角度入手來闡釋的。

本書重點介紹大數據開發平臺服務構建的整體思路和解決方案,內容涵蓋一個成熟的大數據開發平臺必不可少的各類核心組件:工作流調度系統、集成開發環境、元數據管理系統、數據交換服務、數據可視化服務、數據質量管理服務,以及測試環境的建設等。

書中還凝結了作者多年平臺建設的實踐經驗,以及對大數據相關從業人員能力建設和職業規劃的寶貴建議。本書適合廣大志在深入瞭解大數據平臺建設、開發和應用的在職人員及院校師生。

作者簡介

劉旭暉,花名天火,蘑菇街數據平臺資深架構師,負責蘑菇街大數據服務平臺整體產品規劃和架構設計工作;此前多年供職於Intel開源技術中心,是Spark/Hadoop/HBase/Phoenix等開源項目貢獻者;在內核驅動、操作系統中間件、輸入法、瀏覽器等方向均有多年開發經驗。

大數據架構詳解:從數據獲取到深度學習

本書從架構、業務、技術三個維度深入淺出地介紹了大數據處理領域端到端的知識。主要內容包括三部分:第一部分從數據的產生、採集、計算、存儲、消費端到端的角度介紹大數據技術的起源、發展、關鍵技術點和未來趨勢,結合生動的業界新產品,以及學術界新的研究方向和成果,讓深奧的技術淺顯易懂;第二部分從業務和技術角度介紹實際案例,讓讀者理解大數據的用途及技術的本質;第三部分介紹大數據技術不是孤立的,講解如何與前沿的雲技術、深度學習、機器學習等相結合。

作者簡介

朱潔,2008年加入華為,具有8年大數據研發管理經驗,現任華為大數據服務首席規劃師。專註於大數據服務平臺建設、規劃和實踐應用,同時參與多項企業級大數據項目解決方案的規劃、設計和實施工作,在深化大數據行業落地方面有諸多實踐經驗,對解讀大數據垂直行業的技術創新與開發有諸多獨到的見解和心得。

羅華霖,2002年加入華為,華為大數據首席規劃師,主導完成華為大數據平臺DataSight和華為電信大數據解決方案SmartCare技術規劃和架構設計,支持電信運營商數字化戰略轉型,完成浙江移動、上海聯通、沙特STC等200+電信大數據解決方案項目落地。曾任華為軟交換首席設計師,華為大型電信大數據解決方案SmartCare首席架構師。


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 雖然Vue 3還沒有正式發佈,但是熱愛新技術的我早已按捺不住自己的內心,開始嘗試在小項目中使用它了。 1.根據這篇《今日凌晨Vue3 beta版震撼發佈,竟然公開支持腳手架項目!》我搭建了一個Vue 3的腳手架項目,用這種方式搭建的腳手架項目不僅僅只有vue是新版的,就連vue-router、vue ...
  • 1.1什麼是數據結構? 官方解釋: 數據結構是一門研究非數值計算的程式設計問題中的操作對象,以及他們之間的關係和操作等相關問題的學科。 大白話 : 數據結構就是把數據元素按照一定的關係組織起來的集合,用來組織和存儲數據 1.2數據結構分類? 傳統上。我們可以把數據結構分為邏輯結構和物理結構兩大類。 ...
  • 1.前言 這應該是本學期最後一次寫作業總結了吧。總體來說,對作業的節奏也差不多掌握了,作業做起來的效率也更高了。雖然和之前的作業一樣,作業中都要用到新的知識,但是相比之前,更加懂得瞭如何利用工具以及資料。雖然之間卡過殼,但總體而言,這幾次作業還算完成的比較好。 2.作業過程總結 相比前兩個單元,此單 ...
  • 特別註意:本代碼為 Springboot 工作流 前後分離 + 跨域 版本 (許可權控制到菜單和按鈕) 後臺框架:springboot2.3.0+ Flowable6.5.0+ mybaits+maven+介面 前端頁面:html +vue.js 形式 jquery ajax 非同步跨域 json 格式 ...
  • 對MVC、MVP、MVVM的理解(一) 一、MVC MVC模式再網上的爭議是最大的,一些博客中是這樣描述的 MVC模式的通信是單向的,View觸發事件或數據的提交,到了Controller進行處理邏輯之後,返回Model給View,View再從Model中取出數據,當然View中也會有相應的邏輯。個 ...
  • 一、雜論 1.電腦的存儲方式可以分為兩大基本類型:整數類型和浮點類型。 2.C語言中的數據類型關鍵字: int\long\short\unsigned\char\float\double\signed\void\__Bool\__Complex\__Imaginary 3. 1位元組(byte) = ...
  • Django中模板的用法簡介 1. 模板系統的介紹 Django作為一個Web框架,其模板所需的HTML輸出靜態部分以及動態內容插入 模板由HTML代碼和邏輯控制代碼構成 Django框架的模板語言的語法格式: {{var_name}} 例如:HTML被直接編碼在python代碼中: import ...
  • 學習生成器之前,首先需要認識列表生成式,直奔主題。 1、簡單列表生成式示例: 1 b = [ i for i in range(10)] 2 print(b) 3 4 >>> 5 [0, 1, 2, 3, 4, 5, 6, 7, 8, 9] 看樣子好像很NB的樣子,其實它等價於: 1 c = [] ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...