HBase 磁碟爆滿 無法啟動

来源:http://www.cnblogs.com/soupwater/archive/2017/06/27/7084014.html
-Advertisement-
Play Games

問題描述: Hbase master起不來,hdfs沒有問題,起來後沒過一會進程又宕了,hdfs磁碟爆了。 解決過程: 開始懷疑是zookeepr宕了。查看配置發現是zookeeper在三台slaves上面,可能會造成資源搶占,zookeeper會被hbase擠掉。 所以將其中一臺slaves轉到m ...


 問題描述:  
  Hbase master起不來,hdfs沒有問題,起來後沒過一會進程又宕了,hdfs磁碟爆了。
 解決過程:
  開始懷疑是zookeepr宕了。查看配置發現是zookeeper在三台slaves上面,可能會造成資源搶占,zookeeper會被hbase擠掉。
  所以將其中一臺slaves轉到master上面,同事說一般zookeeper會是單獨機器防止資源搶占,有些道理但是有待考證。
  通過 hadoop fsadmin -report 命令查看到磁碟已經爆滿。看來問題找到了,怎麼解決呢?
  master起不來也不能執行語句刪除,另外執行語句刪除後要compact,磁碟空間才會得到釋放;
  此時只能通過強制刪除一張表來解決,到hdfs:/hbase/data/default下刪除一張較小且好恢復的表。
  查看一下此時的hdfs磁碟情況。先啟動zookeeper再啟動hbase.
  正常啟動後,創建剛纔強制刪除的表,但是並不一定能創建成功,可能會提示創建表已經存在,刪除該表時,提示不存在
 解決方法:
       1.清除Zookeeper記憶體資料庫中的相關數據 zkCli.sh ,
         這裡我發現 在master上執行不起來,沒有關係,試試在其他啟動zookeeper的機子上執行腳本,成功進入後,
          (1)刪除 /hbase/table-lock下的相關數據
                ls /hbase/table-lock
                rmr /hbase/table-lock/表名
          (2)刪除 /hbase/table下的相關數據
                ls /hbase/table
                rmr /hbase/table/表名
       2.創建表
           create 'LIVE_AD_CHANNEL_CHANGE',{NAME=>'T'},{NAME=>'R'},{NAME=>'E'}
       3.修改表設置,比如 修改TTL 改為  16天 1382400
         alter 'LIVE_AD_CHANNEL_CHANGE',NAME=>'T',TTL=>'1382400'                                            
         alter 'LIVE_AD_CHANNEL_CHANGE',NAME=>'R',TTL=>'1382400'                                            
         alter 'LIVE_AD_CHANNEL_CHANGE',NAME=>'E',TTL=>'1382400'
      


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 上一篇文章介紹瞭如何搭建Kotlin的開發環境,可是這個開發環境依然基於Android Studio,而在Android Studio上使用Java進行編碼,本來就是理所應當的,何必還要專門弄個Kotlin,這個Kotlin相比Java到底有哪些好處呢? 我們可以把Kotlin看作是Java的升級版 ...
  • 一,代碼。 二,輸出。 ...
  • 項目用到的地圖功能有點多,同時集成了地圖、定位以及導航這幾個功能。 每個單獨使用,都很順利,但合在一起用會有問題。 我每次集成百度地圖,都會在http://lbsyun.baidu.com/sdk/download?selected=mapsdk_basicmap,mapsdk_searchfunc ...
  • Android表情開發 效果圖: 源碼下載-github:https://github.com/SiberiaDante/EmotionApp (覺得有用的給個星星,支持一下哦) ...
  • 自定義樣式 dialog,可設置界面外點擊屏幕外和返回鍵 是否消失 基本用法如下: Utils 工具類封裝: 效果圖: git 源碼下載 To get a Git project into your build: To get a Git project into your build: To ge ...
  • 由於經常會出現 Schema hasn't been registered for model "User" 這樣的問題,所以深入的尋找了一下原因,一點一點的向上查找,最後解決了。 首先是app.js裡面在使用之前要定義,和初始化註冊一次mongoose() 如圖: 因為下麵的index和users ...
  • 神經網路(neural network)是深度學習中一種非常重要的模型,關於神經網路更詳細的介紹呢,這裡就不介紹了,可以自行搜索瞭解。文章主要整理了7個神經網路的實戰項目,相信對神經網路學習者會有所幫助~ ...
  • 記錄一次生產庫遇到的4031錯誤,後來通過調整sga大小將問題解決了 報錯信息: ORA-04031: 無法分配 32 位元組的共用記憶體 ("shared pool","select user#,password,datats...","SQLA","tmp")Incident details in: ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...