摘要:提供以作業基本單位的作業統計視圖pgxc_session_wlmstat,便於用戶觀察運行作業和排隊作業信息。 本文分享自華為雲社區《GaussDB(DWS)如何查看作業運行信息》,作者:幕後小黑爪。 用戶反饋,出現連接數告警,作業併發數高,超過資源池限制,與實際配置不符。經過瞭解,用戶使用p ...
摘要:提供以作業基本單位的作業統計視圖pgxc_session_wlmstat,便於用戶觀察運行作業和排隊作業信息。
本文分享自華為雲社區《GaussDB(DWS)如何查看作業運行信息》,作者:幕後小黑爪。
用戶反饋,出現連接數告警,作業併發數高,超過資源池限制,與實際配置不符。經過瞭解,用戶使用pgxc_stat_activity視圖進行作業併發數判斷。
該視圖顯示用戶查詢相關信息,是以連接線程為基礎來進行統計的,因而使用此視圖進行查詢會存在幾個問題:
- 實際現網環境中,用戶使用的是第三方工具連接的資料庫,這些工具為了提高運行效率,會先建立連接,在下發作業,作業執行完成後返回,再下發作業運行,直到作業全部執行完成,才會斷開連接,這樣就導致pgxc_stat_activity會殘留上次作業運行的信息,記錄不准。
- 該視圖中包含大量內部線程信息,如內部連接(CN-CN),這種連接已經在主CN管控過,所以理論上不需要管控。但是pgxc_stat_activity會進行記錄,導致顯示的活躍會話數增多,造成從pgxc_stat_activity視圖中的併發數超限的現象。
為此,我們提供以作業基本單位的作業統計視圖pgxc_session_wlmstat。便於用戶觀察運行作業和排隊作業信息,以下給出推薦的查詢語句。
註:該視圖在GaussDB(DWS)8.1.3以上版本生效,且用戶需要關閉guc參數enable_gtm_free,如果該參數開啟,會存在統計不准確情況。
參數欄位說明
pgxc_session_wlmstat中欄位說明:
1)語句當前的狀態status,包括:
- pending:執行前狀態。
- running:執行進行狀態。、
- finished:執行正常結束。(當enqueue欄位為 StoredProc或Transaction時,僅代表語句中的部 分作業已經執行完畢,該狀態會持續到該語句完全執行完畢。)
- aborted:執行異常終止。
- active: 非以上四種狀態外的正常狀態。
- unknown: 未知狀態。
1)語句的屬性attribute
- Ordinary:語句發送到資料庫後被解析前的預設 屬性。
- Simple:簡單語句。
- Complicated:複雜語句。
- Internal:資料庫內部語句。
1 分CN查詢結果:
1.1 分CN查詢用戶的作業運行與排隊統計:
select nodename,usename, enqueue,status,count(1) as query_count,sum(statement_mem) as estimate_mem from pgxc_session_wlmstat where status in ('pending','running') and attribute!='Internal' and usename!='Ruby' and usename <> 'omm' group by 1,2,3,4 limit 100;
查詢結果如下:
![](https://pic4.zhimg.com/80/v2-2701914f876f9df9d9a39b06cd0210db_720w.webp)
1.2 分CN查詢用戶作業運行與排隊詳細信息
如果需要其他信息也可從pgxc_session_wlmstat和pgxc_stat_activity中進行獲取
select s.nodename, s.resource_pool,s.usename, a.query_start, s.enqueue,s.status, substr(s.query,1,30) as query, statement_mem as estimate_mem,a.query_id from pgxc_session_wlmstat s, pgxc_stat_activity a where s.threadid=a.pid and status in ('pending','running') and s.attribute!='Internal' and s.usename!='Ruby' and s.usename <> 'omm' order by 1,2,3,5,6 limit 100;
查詢結果如下:
![](https://pic1.zhimg.com/80/v2-fa6a0f373ffd8368c80c248c5258d9ac_720w.webp)
1.3 分CN查詢資源池內的作業運行與排隊統計信息
select resource_pool,nodename, enqueue,status,count(1) as query_count,sum(statement_mem) as estimate_mem from pgxc_session_wlmstat where status in ('pending','running') and attribute!='Internal' and usename!='Ruby' and usename <> 'omm' group by 1,2,3,4 limit 100;
查詢結果如下:
![](https://pic4.zhimg.com/80/v2-63031213c4f2c620633533a4542b477b_720w.webp)
2 集群整體查詢
2.1 整個集群用戶的作業運行和排隊統計
select usename, enqueue,status,count(1) from pgxc_session_wlmstat where status in ('pending','running') and attribute!='Internal' and usename!='Ruby' and usename <> 'omm' group by 1,2,3 limit 100;
查詢結果如下:
![](https://pic1.zhimg.com/80/v2-5e65d2f26c3a921f1042640f62f5bacc_720w.webp)
2.2 整個集群查詢用戶作業運行與排隊詳細信息
select s.resource_pool,s.usename, a.query_start, s.enqueue,s.status, substr(s.query,1,30) as query, statement_mem as estimate_mem,a.query_id from pgxc_session_wlmstat s, pgxc_stat_activity a where s.threadid=a.pid and status in ('pending','running') and s.attribute!='Internal' and s.usename!='Ruby' and s.usename <> 'omm' order by 1,2,4,5 limit 100;
查詢結果如下:
![](https://pic3.zhimg.com/80/v2-9f7d3b5aef68384ab78efddc87024162_720w.webp)
2.3 整個集群資源池內的作業運行與排隊統計信息
select resource_pool, enqueue,status,count(1) as query_count,sum(statement_mem) as estimate_mem from pgxc_session_wlmstat where status in ('pending','running') and attribute!='Internal' and usename!='Ruby' and usename <> 'omm' group by 1,2,3 limit 100;
查詢結果如下:
![](https://pic2.zhimg.com/80/v2-6ec49398664797fcc90a587ece2f0081_720w.webp)
2.4 整個集群資源池內的作業運行和排隊的統計信息
SELECT s.resource_pool AS rpname, COUNT(1) AS session_cnt,SUM(CASE WHEN a.state = 'active' THEN 1 ELSE 0 END) AS active_cnt,SUM(CASE WHEN s.enqueue ='Global' THEN 1 ELSE 0 END) AS global_wait,SUM(CASE WHEN s.lane = 'fast' and s.status = 'running' THEN 1 ELSE 0 END) AS fast_run,SUM(CASE WHEN s.lane = 'fast' and s.status = 'pending' and s.enqueue not in ('Global','None') THEN 1 ELSE 0 END) AS fast_wait,SUM(CASE WHEN s.lane = 'slow' and s.status = 'running' THEN 1 ELSE 0 END) AS slow_run,SUM(CASE WHEN s.lane = 'slow' and s.status = 'pending' and s.enqueue not in ('Global','None') THEN 1 ELSE 0 END) AS slow_wait,SUM(CASE WHEN s.status = 'running' THEN s.statement_mem ELSE 0 END) AS est_mem FROM pg_catalog.pgxc_session_wlmstat s,pg_catalog.pgxc_stat_activity a WHERE s.threadid=a.pid(+) AND s.attribute != 'Internal' AND s.resource_pool != 'root' GROUP BY 1;
查詢結果如下:
7月7日,華為開發者大會2023 ( Cloud )將拉開帷幕,並將在國內30多個城市、海外10多個國家開設分會場,誠邀您參加這場不容錯過的年度開發者盛會,讓我們一起開啟探索之旅!
我們將攜手開發者、客戶、合作伙伴,為您呈現華為雲系列產品服務與豐富的創新實踐,並與您探討AI、大數據、資料庫、PaaS、aPaaS、媒體服務、雲原生、安全、物聯網、區塊鏈、開源等技術話題,展開全面深入的交流。
大會將匯聚全球科學家、行業領袖、技術專家、社區大咖,開設200多場開發者專題活動,為全球開發者提供面對面交流與合作的機會,共同探討技術創新和業務發展。
大會官網:https://developer.huaweicloud.com/HDC.Cloud2023.html
參會購票:https://www.vmall.com/product/10086352254099.html?cid= 211761
點擊參與開發者社區活動,觀賞技術大咖秀、玩轉技術夢工廠,有機會贏取4000元開發者禮包!
歡迎關註“華為雲開發者聯盟”公眾號,獲取大會議程、精彩活動和前沿乾貨。