PostgreSQL執行機制的初步學習

来源:http://www.cnblogs.com/clevermasm/archive/2017/07/30/7260499.html
-Advertisement-
Play Games

作為開源資料庫的新手,近日有興對比了Pg和MySQL的查詢計劃。 通過Pg源碼目錄下的src\backend\executor\README文件,加上一些簡單調試,就能對Pg的執行機制產生一個初步印象;而MySQL的代碼可讀性比Pg差了不少,可能還要花些時日去瞭解先。 原本想寫一篇執行機制對比的文章 ...


 

作為開源資料庫的新手,近日有興對比了Pg和MySQL的查詢計劃。

通過Pg源碼目錄下的src\backend\executor\README文件,加上一些簡單調試,就能對Pg的執行機制產生一個初步印象;
而MySQL的代碼可讀性比Pg差了不少,可能還要花些時日去瞭解先。

原本想寫一篇執行機制對比的文章,現在只能談談對Pg的體會,不足和錯誤之處敬請指正。

 

  • Pg算是學院派的開源資料庫代表產品,其基於關係代數的優化、操作符的實現看起來十分親切。相較於MySQL扁平的計劃,Pg的執行計劃讓人一目瞭然。
  • Pg的執行計劃靜態只讀,這是為了重用計劃方便。在具體執行某計劃時,會有一個包含只讀計劃指針 + 執行所需信息的State操作符樹(對應Plan Trees and State Trees)。類似的表達式也包括Expr和ExprState。
  • Pg的執行計劃為操作符樹,連接如Merge Join,Hash Join為二元操作符;分組、排序等為一元操作符;集合運算,水平分區表相關操作,相關子查詢過濾等可能存在多個子節點。例如,每個相關子查詢生成一個SubPlan掛載到過濾條件上,如果過濾條件有n個相關子查詢那麼就會在scan下方得到n個SubPlan,這一點倒是和Oracle類似(註:12c相關查詢處理會更多地進行unnest,在子查詢中加了分組才構造出來)。
  • 操作符的執行是基於狀態的,操作符之間用元組來傳遞數據。控制權由上而下,數據的傳遞由下而上。操作符對數據的處理以元組為單位,目前沒有批量的優化。
  • 操作符中可能涉及表達式計算(介面ExecMakeFunctionResultNoSets),如投影、過濾。根據表達式類型如整型比較、整型相加,會有不同的ExpreState對應。ExprState包含了整型加法或比較用的函數指針,也包含有操作數。 如int_col1 + int_col2,首先載入ExprState的兩個操作數:從Tuple中的第n個欄位獲取值並存放到ExprState的參數中, 接下來使用ExprState的函數指針,結合兩個參數進行加法運算並返回結果。

總結:

Pg的執行器代碼邏輯很清晰,但是以tuple為單位的處理會使得CPU資源得不到充分利用;
表達式重用優化現在只看到了9.6引入的聚合OP重用

 


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 上一篇,我們介紹Impala的介紹及安裝。    下麵我們開始繼續進一步的瞭解Impala的相關操作。 ...
  • 回來寫博客,少年前端時間被django迷了心魄 如果轉載,請註明博文來源: www.cnblogs.com/xinysu/ ,版權歸 博客園 蘇家小蘿蔔 所有。望各位支持! 如果轉載,請註明博文來源: www.cnblogs.com/xinysu/ ,版權歸 博客園 蘇家小蘿蔔 所有。望各位支持! ...
  • 在mysql中,篩選非空的時候經常會用到is not null和!=null,這兩種方法單從字面上來看感覺是差不多的,其實如果去運行一下試試的話差別會很大!為什麼會出現這種情況呢?null 表示什麼也不是, 不能=、>、< … 所有的判斷,結果都是false,所有隻能用 is null進行判斷。預設 ...
  • 目錄 · 概述 · 原理 · 組成 · 執行流程 · 性能 · API · 應用程式模板 · 通用讀寫方法 · RDD轉為DataFrame · Parquet文件數據源 · JSON文件數據源 · Hive數據源 · 資料庫JDBC數據源 · DataFrame Operation · 性能調優 ...
  • 背景 最近我們在替換生產環境的資料庫伺服器的時候,因該實例下庫比較多,差不多有近200個庫,加上維護視窗的時間有限,所以我們有必要寫段腳本快速批量附加所有的庫,並確保所有的庫都附加成功。當前的情況是所有的庫名都是唯一且不存在庫名相似的情形,如 db_1 和 db_12 不存在這種庫名相似的情況。 環 ...
  • 靜默安裝參考:http://www.cnblogs.com/colmeluna/p/5686142.html 實際安裝中: 1.跳過了第二步設定交換區空間 2.安裝完成後沒有提示執行orainstRoot.sh,只有root.sh 建庫參考:http://www.cnblogs.com/jyzhao ...
  • 本文出處:http://www.cnblogs.com/wy123/p/7259866.html(保留出處並非什麼原創作品權利,本人拙作還遠遠達不到,僅僅是為了鏈接到原文,因為後續對可能存在的一些錯誤進行修正或補充,無他) 與其他數據一樣,記憶體對資料庫的性能有著至關重要的影響,MySQL InnoD ...
  • 在Sql Server 2012之前,實現分頁主要是使用ROW_NUMBER(),在SQL Server2012,可以使用Offset ...Rows Fetch Next ... Rows only的方式去實現分頁數據查詢。 上面代碼中,column1,column2 ... columnN表示實 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...