讀者來信 | 剛搭完HBase集群,Phoenix一啟動,HBase就全崩了,是什麼原因?(已解決)

来源:https://www.cnblogs.com/zpb2016/archive/2020/04/06/12641129.html
-Advertisement-
Play Games

前言: 之前有朋友加好友與我探討一些問題,我覺得這些問題倒挺有價值的;於是就想在本公眾號開設一個問答專欄,方便技術交流與分享,專欄名就定為: 《讀者來信》 。如遇到本人能力有限難以解決的問題,我將轉發該文至我的資源圈儘力尋求大佬們出手幫助,並附上提問者微信二維碼,希望給大家提供這樣一個互幫互助解決問 ...


前言:之前有朋友加好友與我探討一些問題,我覺得這些問題倒挺有價值的;於是就想在本公眾號開設一個問答專欄,方便技術交流與分享,專欄名就定為:《讀者來信》。如遇到本人能力有限難以解決的問題,我將轉發該文至我的資源圈儘力尋求大佬們出手幫助,並附上提問者微信二維碼,希望給大家提供這樣一個互幫互助解決問題的平臺。也誠摯地歡迎大家能在留言區積極探討解決方案,大膽發表自己的看法~

來信人:於*超

小猿提問

剛搭完HBase集群,Phoenix一啟動,HBase的Region節點就全崩潰了,是什麼原因?

小猿分析

報錯如下:

java.sql.SQLException: ERROR 2006 (INT08): Incompatible jars detected between client and server. Ensure that phoenix.jar is put on the classpath of HBase in every region server: org.apache.hadoop.hbase.exceptions.UnknownProtocolException: No registered coprocessor service found for name MetaDataService in region SYSTEM.CATALOG,,1421861120199.56856673d5cff02b55b9ff5955485dba.
    at org.apache.hadoop.hbase.regionserver.HRegion.execService(HRegion.java:5579)
    at org.apache.hadoop.hbase.regionserver.HRegionServer.execServiceOnRegion(HRegionServer.java:3416)
    at org.apache.hadoop.hbase.regionserver.HRegionServer.execService(HRegionServer.java:3398)
    ... more
Caused by: org.apache.hadoop.hbase.exceptions.UnknownProtocolException: org.apache.hadoop.hbase.exceptions.UnknownProtocolException: No registered coprocessor service found for name MetaDataService in region SYSTEM.CATALOG,,1421861120199.56856673d5cff02b55b9ff5955485dba.
    at org.apache.hadoop.hbase.regionserver.HRegion.execService(HRegion.java:5579)
    at org.apache.hadoop.hbase.regionserver.HRegionServer.execServiceOnRegion(HRegionServer.java:3416)
    ... more
Caused by: org.apache.hadoop.hbase.ipc.RemoteWithExtrasException(org.apache.hadoop.hbase.exceptions.UnknownProtocolException): org.apache.hadoop.hbase.exceptions.UnknownProtocolException: No registered coprocessor service found for name MetaDataService in region SYSTEM.CATALOG,,1421861120199.56856673d5cff02b55b9ff5955485dba.
    at org.apache.hadoop.hbase.regionserver.HRegion.execService(HRegion.java:5579)
    at org.apache.hadoop.hbase.regionserver.HRegionServer.execServiceOnRegion(HRegionServer.java:3416)
    ... 14 more

我們首先分析一點:Phoenix啟動HBase就掛,而Phoenix基於HBase協處理器做了很多工作,很明顯HBase單獨啟動沒問題,走到協處理器這一步就報錯,一定不是HBase端的問題,也一定是沒有設定下麵的參數為False。

# hbase-site.xml
<property>
    <name>hbase.coprocessor.abortonerror</name>
    <value>false</value>
</property>

一般我們應用HBase協處理器技術,首先要將其設為False。這個是什麼意思呢?意思就是當載入於HBase之上的協處理器異常時要不要abort Hbase。那肯定是不要,總不能載入了一個協處理器將整個集群搞掛了,畢竟手寫協處理器代碼難免有bug。

我們設置該參數後,重啟HBase再啟動Phoenix,這回HBase沒事了,但是Phoenix依然報上面的錯誤,為什麼呢?請看下文的小猿解答。

小猿解答

其實看到這個異常的第一眼,總感覺是Phoenix與HBase不相容,網上的答案也大都是不相容,又特地看了一下HBase版本,確實沒有問題。導致這個問題的因素可能有很多,比如版本不相容就是一個,這裡就不兜圈子了,直接曝光下這回遇到的這個問題的導致因素是什麼。

最終找到的原因是:將Phoenix壓縮包下幾乎所有的jar包都拷貝到了HBase/lib目錄下,造成了包衝突。而官網只是要求將Phoenix-version-server.jar拷貝到HBase/lib目錄下。

To install a pre-built phoenix, use these directions:

  • Download and expand the latest phoenix-[version]-bin.tar.
  • Add the phoenix-[version]-server.jar to the classpath of all HBase region server and master and remove any previous version. An easy way to do this is to copy it into the HBase lib directory (use phoenix-core-[version].jar for Phoenix 3.x)
  • Restart HBase.
  • Add the phoenix-[version]-client.jar to the classpath of any Phoenix client.

很簡單的4步操作,相比老版本真的簡單了許多。所以這裡還是建議大家還是以官網的教程為主,網路教程為輔,除了能少入坑,也能學到真東西,有助於融會貫通。這也是本文著重想申明的一點,千萬不要照葫蘆畫瓢,畢竟一個相同的問題可能會有多個不同的誘因~

掃描二維碼關註博主公眾號

轉載請註明出處!歡迎關註本人微信公眾號【HBase工作筆記】


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 情形1: ValueError: Invalid configuration: - Deprecated option 'domaincontroller': use 'http_authenticator 成功安裝pyspider以後,運行pyspider all以後會有上面的問題; 解決辦法: ...
  • 下載地址:https://downloads.mysql.com/archives/community/ 1.上傳到伺服器並解壓 tar -xvf mysql-5.7.26-linux-glibc2.12-x86_64.tar 2.再移動並重命名一下 mv mysql-5.7.26-linux-gl ...
  • 今日有朋友加好友與我探討一些問題,我覺得這些問題倒挺有價值的;於是就想在本公眾號開設一個問答專欄,方便技術交流與分享,專欄名就定為:《讀者來信》。如遇到本人能力有限難以解決的問題,該貼將會被轉發至我的資源圈尋求大佬們出手幫助,並附上提問者微信二維碼。也歡迎大家在留言區積極探討解決方案~ 來信人:黃 ...
  • 10年前,我寫了第一個CLR存儲過程在SQL Server里,10年後,我又寫了一個。 我花了1個小時才找到如何創建CLR項目…… 創建C# CLR項目的地方變了,在VS 2010里有專門的項目模板: 但是在VS 2015里,只有先創建資料庫對象,然後添加SQL CLR C#類型的Item了: 之後 ...
  • 作為ETL的一部分,有時候就是需要把數據的Insert腳本生成出來,然後人肉拷貝到另一個地方執行。 熟悉SMSS的同學們都知道,有個生成腳本的任務,可以生成資料庫的create腳本啊什麼的,其實也能夠生產表中的數據。 自動化的ETL總不能連導出數據都人肉。。。一是容易出錯,二是太low了。 C#控制 ...
  • 曾多次聽到“MySQL為什麼選擇RR為預設隔離級別”的問題,其實這是個歷史遺留問題,當前以及解決,但是MySQL的各個版本沿用了原有習慣。歷史版本中的問題是什麼,本次就通過簡單的測試來說明一下。 1、 準備工作 1.1 部署主從 部署一套主從架構的集群,創建過程較簡單,可以參考歷史文章部署 MySQ ...
  • 字元函數,顧名思義,操作的就是字元串。通過下圖,我們來瞭解一下Oracle的字元函數。 一、大小寫控制函數 lower、upper、initcap select lower('Hello World') 轉小寫,upper('Hello World') 轉大寫,initcap('hello worl ...
  • 一、Oracle的Drop Table語句 首先,我們來看一下Oracle Drop Table的語法格式。 解釋一下裡面的參數: schema Schema表示方案名稱,這裡可以理解為用戶名,預設為當前用戶下的表。比如,要刪除scott用戶下的emp表,drop table scott.emp p ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...