糟糕,資料庫異常不可用怎麼辦?

来源:https://www.cnblogs.com/huaweiyun/archive/2022/12/06/16954584.html
-Advertisement-
Play Games

摘要:糟糕,資料庫異常不可用怎麼辦?挺著急的,線上等。 本文分享自華為雲社區《糟糕,資料庫異常不可用怎麼辦?》,作者:GaussDB 資料庫。 隨著數字化轉型的加速,數據量爆髮式增長,用戶對資料庫運維能力要求更高,實現對資料庫的高效智能管理,尤其是業務異常時,資料庫運維平臺能自動定位故障並修複,或者 ...


摘要:糟糕,資料庫異常不可用怎麼辦?挺著急的,線上等。

本文分享自華為雲社區《糟糕,資料庫異常不可用怎麼辦?》,作者:GaussDB 資料庫。

隨著數字化轉型的加速,數據量爆髮式增長,用戶對資料庫運維能力要求更高,實現對資料庫的高效智能管理,尤其是業務異常時,資料庫運維平臺能自動定位故障並修複,或者提供有價值信息,幫助客戶快速定位解決問題。

華為雲資料庫團隊打造的RDS for MySQL智能DBA助手,為資料庫管理人員提供了一站式資料庫運維方案,能夠幫助用戶快速處理異常,保持業務穩定運行。近期,我們新上線了自治限流功能,通過限流非核心業務SQL來保障核心業務穩定運行,下麵將為您帶來該項業界領先的功能的詳細解讀。

在遭遇異常流量高峰時,如何處理?

在實際運維場景中,客戶因為業務變更或者業務高峰期會帶來流量高峰,導致系統指標異常,實例CPU飆升近100%,會話SQL處理變慢,活躍連接數增加,資料庫響應異常甚至不可用。可能的原因有以下兩個方面:

  1. SQL問題:SQL執行效率慢,如對無主鍵、無索引的表進行查詢操作時,CPU和 IO被打滿。
  2. 流量問題:突發的流量急劇上升,資料庫容量達到瓶頸,影響正常業務。

解決方案:

針對上述問題,一般會採用兩種方式來處理:

方式一:先分析異常SQL,定位後手動Kill會話

方式二:簡單粗暴,重啟資料庫。

但面對複雜問題,傳統解決方案往往無法從根本上解決,定位解決問題花費時間長,導致業務受損。針對這一挑戰,業界採用限流的方式來處理,不區分業務,即不會區分限流SQL所在的庫或者客戶端用戶,這可能導致無差別的kill會話,核心業務受損。

我們今天介紹的自治限流功能是如何應對這一潛在風險呢?

自治限流,指的是通過預先設置限流策略,自動限定執行SQL的併發度,通過小部分業務受損,保障核心業務的正常運行。具體來說,可以通過以下三個策略來進行流控:

分庫、分用戶設置限流範圍

自治限流功能支持分庫、分用戶兩種方式設置,客戶根據業務情況,識別核心業務庫和客戶端用戶,按需選擇相應的限流方式。

  • 按庫設置:根據業務重要程度,選擇對特定的一個或者多個庫進行限流,預設不區分庫名。
  • 按用戶名設置:根據不同用戶業務差異,選擇對特定的一個或者多個用戶進行限流,預設不區分用戶。

設置限流時間:

通過設置限流時間窗(即自治限流功能只在該時間段生效)和每次最大限流時長(即自治限流生效後持續時長),方便定位SQL異常,請註意:同一天只在該時間窗內生效一次。

設置限流策略

條件1:根據業務情況,設置CPU利用率大於多少 【且/或】 活躍會話數大於多少,且上述條件持續時間大於多少分鐘,會觸發限流。

條件2:設置允許的最大活躍併發數,當前活躍會話數大於最大活躍會話數時,會將會話數清理到小於最大活躍會話數。

設置界面如下:

完成上述設置後,自治限流功能可以自動檢測客戶實例異常,觸發限流策略後,根據配置的限流範圍和時間,自動進行分庫分用戶限流處理,在保證核心業務SQL穩定運行的前提下,限制引發CPU飆升的新上業務SQL,帶來活躍會話數逐漸降低,CPU下降到正常值,QPS恢復到業務正常水平,資料庫實例恢復正常。

流量高峰常常是不可預測的,這給運維帶來非常大的挑戰和工作負擔。華為雲資料庫自治限流功能,通過分庫與分用戶限流方式,自動檢測資料庫異常,並及時進行限流處理,保障核心業務的穩定運行,極大減輕了DBA的運維壓力,使其更聚焦數據架構設計以及數據價值挖掘等核心工作。目前該功能已上線,歡迎大家體驗。https://www.huaweicloud.com/product/mysql.html

 

點擊關註,第一時間瞭解華為雲新鮮技術~


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 本文主要介紹方法引用的5種形式:對象的非靜態方法引用、類的靜態方法引用、類的非靜態方法引用、構造器的引用、數組的引用。 ...
  • 有來實驗室結合正式的商城訂單支付業務場景將 Seata 分散式事務可視化,通過現象去看本質(原理和源碼),告別被動式輸入的短期記憶學習。 ...
  • C# 簡介 C#是微軟公司發佈的一種由C和C++衍生出來的面向對象的編程語言,它不僅去掉了 C++ 和 Java 語言中的一些複雜特性,還提供了可視化工具,能夠高效地編寫程式。 C#是由C和C++衍生出來的一種安全的、穩定的、簡單的、優雅的面向對象編程語言。它在繼承C和C++強大功能的同時去掉了一些 ...
  • 防禦式編程的重點就是需要防禦一些程式未曾預料的錯誤,這是一種提高軟體質量的輔助性方法,斷言assert就用於防禦式編程,編寫代碼時,我們總是會做出一些假設,斷言就是用於在代碼中捕捉這些假設。使用斷言是為了驗證預期的結果——當程式執行到斷言的位置時,對應的斷言應該為真;若斷言不為真時,程式會終止執行, ...
  • 十七、插入數據 本章將介紹如何利用sql的INSERT語句將數據插入表中 數據插入 插入分為以下幾種方式:插入完整的行、插入行的一部分、插入多行、插入某些查詢結果 插入完整的行 INSERT INTO Customers VALUES(NULL, 'Pep E. LaPew', '100 Main ...
  • 1.5 HDFS分散式文件系統 1.5.1 HDFS 簡介 HDFS(全稱:Hadoop Distribute File System,Hadoop 分散式文件系統)是 Hadoop 核心組成,是分散式存儲服務。 分散式文件系統橫跨多台電腦,在大數據時代有著廣泛的應用前景,它們為存儲和處理超大規模 ...
  • sysbench是一個開源的、基於LuaJIT(LuaJIT 是 Lua 的即時編譯器,可將代碼直接翻譯成機器碼,性能比原生 lua 要高) 的、可自定義腳本的多線程基準測試工具,也是目前用得最多的 MySQL 性能壓測工具。 基於 sysbench,我們可以對比 MySQL 在不同版本、不同硬體配 ...
  • 緩存管理器CacheManager 一、背景 ​ 代碼併發量因建行活動頁上升,大量請求打到Mongo導致資料庫cpu100%從而服務不可用,目前解決方案,使用編程式緩存,即對緩存的操作與業務代碼耦合。目前基本上可以解決併發問題。此次提出CacheManager主要是優化代碼。使用聲明式,即註解的方式 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...