Oracle TNS 協議分析——1、系列開篇:方法論及基礎知識

来源:https://www.cnblogs.com/yizhu2000/archive/2020/05/11/12866520.html
-Advertisement-
Play Games

本系列重點分析TNS 314下的客戶端與服務端之間的通訊,通過抓包分析,查看在不同客戶端,不同服務端情況下傳輸方式的不同,嘗試還原其協議細節,實現對協議中一些關鍵內容的解析,如登錄用戶名,協議版本,oracle版本,sql命令,同時給出示例LUA代碼。為了分析不同客戶端架構,本系列使用了兩類客戶端3... ...


前言

Oracle 客戶端與服務端採用TNS作為其數據交換協議。TNS全稱Transparent Network Substrate,是與Oracle資料庫伺服器通訊的專有協議,該協議為Oracle內部協議,不向外界公開,在此之前,已經有一些反向工程的實踐對各個版本的TNS進行解析,比如wireshark就有專門的TNS分析工具,中文的協議解析可參見《ORACLE協議分析》本系列基礎介紹中關於TNS包基礎格式,及連接包等均沿用wireshark提供的格式。本系列重點分析TNS 314下的客戶端與服務端之間的通訊,通過抓包分析,查看在不同客戶端,不同服務端情況下傳輸方式的不同,嘗試還原其協議細節,實現對協議中一些關鍵內容的解析,如登錄用戶名,協議版本,oracle版本,sql命令,同時給出示例LUA代碼。為了分析不同客戶端架構,本系列使用了兩類客戶端32位與64位客戶端進行測試,同時重點使用了多個廠商的不同客戶端(Navicat、PLSQL、SQLPlus)同時也兼顧分析了OJDBC Thin Client的情況。服務端採用11g和12c兩個版本。本文主要分析連接建立,身份驗證、命令傳輸和返回、以及錯誤信息返回的過程。

方法及工具

主要採用wireshark對客戶端與Oracle間的通訊進行抓包分析。

客戶端:

服務端

Navicat Premium 15 64bit

Oracle 11g 64bit Linux

Navicat Premius 12 32bit

Oracle 12c 64bit windows

PLSQL 11.2 64bit

 

SQLPlus 11.2 64bit

 

OJDBC8(Thin Client)

 

分析過程中關於包類型定義等參考wireshark的tns 解析器代碼。

代碼示例說明

代碼示例用lua寫成,可以在openresty15 64bit window或linux版本下運行

其中從socket流中解碼用到了string.unpack 和pack 方法是純lua開源實現,是對c語言 lua 擴展lpack 的純lua模擬

系列目錄

一、方法論與基礎知識

二、基礎包結構

三、連接認證流程與包分析

四、SQL執行流程與包分析

五、錯誤返回

協議介紹

Transparent Network Substrate顧名思義是對傳輸層協議無關,根據Oracle的介紹:TNS底層支持TCP,SSL TP,SDP,named pipeline等協議。在OSI七層協議體系中,TNS屬於會話層協議

詳細的介紹可參考

https://docs.oracle.com/cd/B28359_01/network.111/b28316/architecture.htm#NETAG004

 

Oracle版本與TNS協議版本對應關係

Oracle 版本

TNS版本

11gr2 12c

tns314

10g

313

9i

312

X

311

8i

310

 

不同driver的差異

Oracle Client調用服務端,最終實現模式主要是 OCI和ThinDriver。

  1. OCI是C 語言的lib,和平臺相關,有linux和windows 版本;
  2. ThinDriver是純Java的包,與平臺無關;

很多人反映反編譯Java代碼看到的情況和用plsql等工具調用實現不同,大概率是此原因,但無論Navicat,SQLPlus,PLSQL都走的OCI。相應JDBC有兩種

  1. JDBC OCI Driver 走OCI調用,
  2. JDBC Thin Driver走 純Java實現

ThinDriver的實現與OCI的實現從抓包上看,在連接建立和認證過程差距不大,但Data包差距很大,無論Endian模式,還是具體數據類型封裝格式都有較大差異,在ThinDriver的實現中,很少未見出現Piggy Command的情況,所有非0或大於一位的byte或者int變數都會嚴格前序長度欄位。

不同客戶端實現的差異

相同位數(都是64位或者都是32位)的不同客戶端的實現在抓包分析時也不太相同,大概表現有兩個方面,一個是流程上的不同,一個是數據上的不同,我們以執行select語句為例,PLSQL和Navicat在流程上稍有差別,下圖是Navicat Premium15 執行的流程

1

-------

Data Piggyback(11) Cursor Close All(69)

註意此處也有可能是 03 5e

----->

具體語句

2

<-----

Data DescribeInfo(10)  17

-------

返回列

3

-------

Data UOCIFun(03) ExecuteARow(04)

----->

 

4

<-----

Data ReturnStatus(04)

-------

 

5

-------

Data UOCIFun(03) FetchARow(05)

----->

獲取其他值

6

<-----

Data RowTransferHeader(06)  01

-------

返回值

 

而PLSQL中沒有中間3和4的部分。

數據上的不同有的時候是一些數據長度,有的時候是一些設置位上的差異,比如對於select 的Piggycommand(pagekage type 0x6 DataId=0x11 CallID=0x69)

這個包內容在Sqlplus,plsql,navicat上不僅內容,長度也就有差異

語句

Plsql

Sqlplus

Navicat

Select

fe ff ff ff ff ff ff ff

01 00 00 00

04 00 00 00

fe ff ff ff ff ff ff ff

01 00 00 00 00 00 00 00

05 00 00 00

當沒有輸入;05會變03

fe ff ff ff ff ff ff ff

01 00 00 00

05 00 00 00

不同客戶端位數間差異

32位客戶端和64位客戶端也有不同,比如32位客戶端中所有0xfe ff ff ff ff ff ff ff 全部以其補碼01代替。但64bit 的ThinClient也有此情況,所以很難說這些現象是否完全由位數造成,這會導致許多協議中許多部分的長度根據位數不同有一定區別。文中凡協議均會標註出不同客戶端位數下的長度,若未單獨標註,則說明二者無不同,例如Buddle execute Command命令格式:

 

32bit

64bit

 

序列號

1

1

 

Piggy command

9 or 13

16 or 20

 

Buddle execute command 035e

變長

變長

 


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 全屏應用對應的是視窗模式應用,全屏應用指的是整個屏幕都是被咱一個應用獨占了,屏幕上沒有顯示其他的應用,此時的應用就叫全屏應用。如希沃白板這個程式。本文主要告訴大家從微軟官方的文檔以及考古瞭解到的 Windows 對全屏應用的優化,以及是如何進行的優化,方便小伙伴在撕的時候可以找到根據 ...
  • "TOC" Shell學習 shell概述 shell是一個命令行解釋器,它接收應用程式/用戶命令,然後調用操作系統內核。 shell解釋器 1. Linux提供的解釋器有 2. bash和sh的關係 3. Centos預設的解析器是bash Shell腳本入門 1. 腳本格式 腳本以 !/bin/ ...
  • 進程管理類命令 信號: 在linux當中所有的進行管理都是靠信號來管理的.像我們平時要結束某個進程就是使用的15信號SIGTERM,還有想要強制殺死某個進程,就是使用的9信號SIGKILL等等. 在linux可以查看信號有哪些的指定太多了,kill -l ; trap -l; man 7 signa ...
  • liunx中各種監控工具,量大.本篇全是命令介紹,筆者把各個命令的都實驗一遍,給同學們看看. ...
  • 阻塞IO模型(Blocking I/O) 內核一開始提供了 與 阻塞式操作。 當客戶端連接時,會在對應進程的文件描述符目錄(/proc/進程號/fd)生成對應的文件描述符(0 標準輸入;1 標準輸出;2 標準錯誤輸出;),比如 fd 8 , fd 9; 應用程式需要讀取的時候,通過系統調用 讀取,如 ...
  • 自上世紀80年代末至90年代初互聯網誕生以來,Web服務可以說是在互聯網的普及過程當中起到了巨大的作用。而Web服務應該是當今世界上普通用戶訪問互聯網的最廣泛的方式了,用戶只需在瀏覽器中輸入所謂網址的方式即可瀏覽互聯網上的海量信息,而瀏覽器這種瘦客戶端的交互方式也是目前最主流的交互方式。 Web服務 ...
  • 在丟包率0.3%的情況下,mongodb的replicaSet發生了比較嚴重的問題。表現為同步速率大幅下降,然後產生延遲。有的已經超過2-3個小時,造成有些打到延遲mongodb上面的資料庫請求無法反應資料庫的最新更改 ...
  • MongoDB向ES同步數據延遲越來越大,有的已經超過10個小時,造成客戶新加入的用戶無法被搜索出來。由於在系統中ES類似於數倉,很多統計和第三方接系統都需要從ES獲取數據,所以也影響了一些其他依賴ES數據的功能和業務。 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...