Hive使用與安裝步驟

来源:https://www.cnblogs.com/QI1125/archive/2018/01/08/8245239.html
-Advertisement-
Play Games

1.Hive安裝與配置 Hive官網:https://hive.apache.org/ 1. 安裝文件下載 從Apache官網下載安裝文件 http://mirror.bit.edu.cn/apache/hive/ (apache-hive-2.3.2-bin.tar.gz) 還有我選擇mysql作 ...


1.Hive安裝與配置

Hive官網:https://hive.apache.org/ 
1. 安裝文件下載 
從Apache官網下載安裝文件 http://mirror.bit.edu.cn/apache/hive/ 
(apache-hive-2.3.2-bin.tar.gz) 
這裡寫圖片描述 
還有我選擇mysql作為元數據存儲,所以還需下載jdbc驅動包。(mysql-connector-java-5.1.45.tar) 
下載地址:https://dev.mysql.com/downloads/connector/j/ 
這裡寫圖片描述 
要把相應的驅動複製到hive-2.3.2/lib文件夾下(mysql-connector-java-5.1.38-bin.jar) 
2. 安裝mysql 
請參考Hive集成mysql資料庫 
3. 解壓安裝文件 
tar -zxf apache-hive-2.3.2-bin.tar.gz 
4. 設置環境變數 
vim ~/.bashrc 
這裡寫圖片描述 
source ~/.bashrc 
5. 修改hive-site.xml文件 
hive-site.xml詳細配置瞭解:Hive 配置詳細說明 
vim apache-hive-2.3.2-bin/conf/hive-site.xml 
這裡寫圖片描述 
6. 修改hive-env.sh文件 
cp hive-env.sh.template hive-env.sh 
vim hive-env.sh 
export HADOOP_HOME=/home/hadoop/opt/hadoop-2.9.0 
這裡寫圖片描述 
保存source hive-env.sh使文件生效 
7. 創建hive-site.xml軟連接 
cd opt/spark-2.2.1-bin-hadoop2.7/conf 
ln -s /home/hadoop/opt/apache-hive-2.3.2-bin/conf/hive-site.xml hive-site.xml 
這裡寫圖片描述 
之後 
這裡寫圖片描述

2.Hive的運行

  1. 初始化 
    cd opt/apache-hive-2.3.2-bin/bin 
    ./schematool -dbType mysql -initSchema 
    這裡寫圖片描述
    之後進入mysql 
    mysql -uroot -p 
    這裡寫圖片描述 
    查看資料庫show databases; 
    是否生成performance_schema 
    這裡寫圖片描述
  2. 打開hiveserver2 
    ./hiveserver2

HiveServer2(在Hive 0.11中引入)有它自己的CLI叫做Beeline。hiv病毒現在已經被棄用,因為它缺少多用戶、安全以及其他的HiveServer2的功能。從殼層跑出: 
3. 運行hive 
由於配置過環境變數可以直接執行hive 
hive 
這裡寫圖片描述 
4. Hive Beeline使用 
HiveServer2提供了一個新的命令行工具Beeline,它是基於SQLLine CLI的JDBC客戶端。

./beeline -u jdbc:hive2://localhost:10000

Beeline是從HiveServer2的JDBC URL開始的,它依賴於HiveServer2啟動的地址和埠。預設情況下,這將是(localhost:10000),所以地址會像jdbc:hive2:/ / localhost:10000。 
這裡寫圖片描述

現在就可以使用了


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 實戰環境: 公司計劃在年底做一次大型市場促銷活動,全面衝刺下交易額,為明年的上市做準備。公司要求各業務組對年底大促做準備,運維部要求所有業務容量進行三倍的擴容,並搭建出多套環境可以共開發和測試人員做測試,運維老大為了在年底有所表現,要求運維部門同事儘快實現,當你接到這個任務時,有沒有更快的解決方式? ...
  • 1.GPG簡介 1991年,程式員Phil Zimmermann為了避開政府的監視,開發了加密軟體PGP。因為這個軟體非常好用,迅速流傳開來成為許多程式員的必備工具。但是,它是商業軟不能自由使用。所以,自由軟體基金會決定,開發一個PGP的替代品取名為GnuPG,因此GPG就誕生了。GPG是GNU P ...
  • 什麼是socket? socket起源於Unix,而Unix/Linux基本哲學之一就是“一切皆文件”,都可以用“打開open –> 讀寫write/read –> 關閉close”模式來操作。其實socket就是該模式的一個實現,socket即是一種特殊的文件,一些socket函數就是對其進行的操 ...
  • macos 命令行安裝 ipa 蘋果發神經後itunes已經無法在安裝app了,如果有知道的兄弟可以告訴我啊 "ideviceinstaller" 使用這個開源項目可以在macos下安裝app 安裝後, 運行 出現 這個,可以看看這個 "issues" 我使用下麵這個方式成功解決 ...
  • 這一系列的Linux入門都是本人在《鳥哥的Linux私房菜》的基礎上總結的基本內容,主要是記錄下自己的學習過程,也方便大家簡要的瞭解 Linux Distribution是Ubuntu而不是書本上推薦的CentOS,建議裝雙系統,不要使用虛擬機。 代碼在github上:Linuxpractice 其 ...
  • 位元組序:就是數據在記憶體中的存放順序,也可稱之為端模式。 大端模式和小端模式的定義 1) Little-Endian就是低位位元組排放在記憶體的低地址端,高位位元組排放在記憶體的高地址端。 2) Big-Endian就是高位位元組排放在記憶體的低地址端,低位位元組排放在記憶體的高地址端。 3) 網路位元組序:TCP/I ...
  • Spark基礎 ① 快--基於記憶體的運算 ② 易用--支持java,python和Scala的API,shell互動式運用,還支持超過80種高級演算法 ③ 通用--spark提供了統一的解決方案,spark用於批處理,互動式查詢spark sql, 實時流處理spark streaming,機器學習s ...
  • 和關係資料庫一樣,Neo4j同樣可以創建索引來加快查找速度。 在關係資料庫中創建索引需要索引欄位和指向記錄的指針,通過索引可以快速查找到表中的行。 在Neo4j中,其索引是通過屬性來創建,便於快速查找節點或者關係。 手動索引 先來說一下怎樣創建手動索引。 創建索引採用顯示創建,就像添加節點一樣添加索 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...