日誌審計系統設計

来源:https://www.cnblogs.com/wintersun/archive/2019/12/14/12038129.html
-Advertisement-
Play Games

背景 薩班斯(SOX)法案。在美國上市公司必須遵循的“薩班斯(SOX)法案” 中要求對企業內部網路信息系統進行評估,其中涉及對業務系統操作、資料庫訪問等業務行為的審計。 日誌審計模型系統架構參考四層模型日誌審計類別1) HTTP 會話審計從流量中還原 HTTP 會話數據,並根據會話特征進一步深度解析... ...


背景

    薩班斯(SOX)法案。在美國上市公司必須遵循的“薩班斯(SOX)法案” 中要求對企業內部網路信息系統進行評估,其中涉及對業務系統操作、資料庫訪問等業務行為的審計。

日誌審計模型

image


系統架構參考

image


四層模型

image


日誌審計類別

1) HTTP 會話審計
從流量中還原 HTTP 會話數據,並根據會話特征進一步深度解析 HTTP BBS訪問、HTTP 網頁標題、HTTP 威脅情報、HTTP DGA 功能變數名稱(DGA 功能變數名稱庫、機器學習)、搜索關鍵詞及其他 HTTP 會話等,數據中至少包含請求方法、返回值、主機名、網頁地址、用戶代理、語言、伺服器類型等數據。

39ecc0f9bdd6597220cde7c2022a24be

                                以上Ngnix日誌結構化示例

從結構化的視角看日誌,可以從內在屬性和外在屬性著手。

內在屬性是從時間戳、欄位、欄位命名等日誌內容本身所具備的信息內容的角度,對日誌進行分析。

外在屬性是從來源、歸屬分類、資產信息等維度來分析。來源是指日誌來自哪台主機、哪個 IP;歸屬分類是從日誌的所屬系統及日誌用途等方面看日誌;日誌的資產信息是指日誌的負責人、負責人的聯繫方式等相關信息,可以通過平臺將日誌與負責人進行關聯,以便事故發生後可以直接通知到相關負責人


2) DNS 會話審計
從流量中還原 DNS 會話數據,並根據會話特征進一步深度解析 DNS 威脅情報、DNS DGA 功能變數名稱、DNS 解碼錯誤、DNS 解析錯誤、DNS 解析超時,數據中至少包含請求功能變數名稱(FQDN)、DNS 伺服器地址、DNS 伺服器埠、請求返回解析地址等信息。


3)FTP 會話審計
從流量中還原 FTP 會話數據,數據中至少包含登錄用戶、傳輸文件名以及操作命令等信息。


3)Telnet 會話審計
從流量中還原 Telnet 會話數據,數據中至少包含登錄用戶以及操作命令的實際內容等信息。資料庫會話審計從流量中還原主流資料庫會話數據,如 Mysql、SQLServer、Oracle 等主流資料庫,數據中至少應包含登錄用戶名、操作命令(抓取 SQL 語句)等信息。

4)郵件會話審計
從流量中還原郵件會話數據,包括 POP3,SMTP、IMAP 協議,數據中至少包含收件人、發件人、主題、附件名稱等信息。


5)TLS 會話審計
從流量中還原 TLS 會話數據,主要針對 SSL/TLS 握手部分(非加密),數據中至少包含伺服器及客戶端證書、伺服器名稱等信息。


6)工控會話
從流量中還原應用協議為 IEC104、MMS、MODBUS、OPC、OPCUA、EthernetI IP 和 CIP 的工控會話,數據中包含工控會話的 MODBUS 的功能碼、功能描述,支持解析 IEC、EthernetI IP 和 CIP 的命令等信息。


7)其他會話審計
其他會話均通過可以通過組合條件查詢網路會話支撐審計,網路會話列表包含了全流量的會話還原留存,會話詳情將根據 SSH、SMBv1/v2、DCERPC 自動適配欄位展現。

image



日誌分析系統

       日誌分析的關鍵環節主要集中在日誌源識別、數據接入、數據結構化清洗、數據分析等環節。根據企業實際生產環境,日誌數據分別有操作系統日誌、網路設備日誌、中間件日誌、資料庫日誌、業務系統日誌等類型。數據接入有 Agent、Syslog、SNMP 等方式。數據結構化涉及各種類型日誌的清洗方式、字典擴展、正則解析、欄位識別等內容,內容比較多,有一個標準化流程的話實施起來會相對容易。數據分析包括搜索、可視化,此外還要考慮監控、定時任務、報表等功能。在落地交付時,可以從業務維度,根據系統模塊進行數據接入,先調研部分業務系統要實現的分析效果,然後針對這些需求做相應的告警、分析。後續用戶還可接入更多的業務系統。也可以從功能維度做日誌分析,即先調研所有系統要實現的分析目的,然後再做告警、分析。根據自身企業的需求選擇對應的交付方式。




今天先到這兒,希望對技術領導力, 企業管理,系統架構設計與評估,團隊管理, 項目管理, 產品管理,團隊建設 有參考作用 , 您可能感興趣的文章:
領導人怎樣帶領好團隊
構建創業公司突擊小團隊
國際化環境下系統架構演化
微服務架構設計
視頻直播平臺的系統架構演化
微服務與Docker介紹
Docker與CI持續集成/CD
互聯網電商購物車架構演變案例
互聯網業務場景下消息隊列架構
互聯網高效研發團隊管理演進之一
消息系統架構設計演進
互聯網電商搜索架構演化之一
企業信息化與軟體工程的迷思
企業項目化管理介紹
軟體項目成功之要素
人際溝通風格介紹一
精益IT組織與分享式領導
學習型組織與企業
企業創新文化與等級觀念
組織目標與個人目標
初創公司人才招聘與管理
人才公司環境與企業文化
企業文化、團隊文化與知識共用
高效能的團隊建設
項目管理溝通計劃
構建高效的研發與自動化運維
某大型電商雲平臺實踐
互聯網資料庫架構設計思路
IT基礎架構規劃方案一(網路系統規劃)
餐飲行業解決方案之客戶分析流程
餐飲行業解決方案之採購戰略制定與實施流程
餐飲行業解決方案之業務設計流程
供應鏈需求調研CheckList
企業應用之性能實時度量系統演變

如有想瞭解更多軟體設計與架構, 系統IT,企業信息化, 團隊管理 資訊,請關註我的微信訂閱號:

MegadotnetMicroMsg_thumb1_thumb1_thu[2]

作者:Petter Liu
出處:http://www.cnblogs.com/wintersun/
本文版權歸作者和博客園共有,歡迎轉載,但未經作者同意必須保留此段聲明,且在文章頁面明顯位置給出原文連接,否則保留追究法律責任的權利。 該文章也同時發佈在我的獨立博客中-Petter Liu Blog。

您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 覆選框全選/全部選 ~~~javascript 你愛好的運動是什麼?全選/全不選 足球 籃球 羽毛球 乒乓球 ~~~ 你愛好的運動是什麼?全選/全不選 足球 籃球 羽毛球 乒乓球 ...
  • 前言 在前文中,我說過本系列文章的受眾是在現代前端體系下能夠熟練編寫業務代碼的同學,因此本文在介紹 webpack 配置時,僅提及構建一個庫所特有的配置,其餘配置請參考 webpack 官方文檔。 輸出產物 構建一個庫與構建一個一般應用最大的不同點在於 構建完成後輸出的產物 。 一般應用構建完成後會 ...
  • 參考 https://www.w3cschool.cn/css/css-boxmodel.html https://blog.csdn.net/zengyonglan/article/details/53301146 CSS 盒子模型(Box Model) 盒子模型 ("box model")是CS ...
  • "聊聊分散式事務,再說說解決方案" "分散式事務CAP理解論證 解決方案" "分散式系統的2PC、3PC詳細分析" "github tcc示例" "分散式事務、重覆消費、順序消費" 一、理論 CAP相關: CAP與BASE相關: "我的博客" 而對於分散式中的問題的解決方案,CAP原則出現,描述如下 ...
  • 職責鏈模式 定義 使多個對象都有機會處理請求,從而避免請求的發送者和接收者之間的耦合關係。將這個對象連成一條鏈,並沿著這條鏈傳遞該請求,直到有一個對象處理它為止。 UML圖 好處 當客戶提交一個請求時,請求是沿鏈傳遞直至有一個 ConcreteHandler 對象負責處理它 接收者和發送者都沒有對方 ...
  • 舉個慄子 路邊攤吃燒烤,老闆只有一人,又要記住點單,又要忙著收費,客戶做什麼都要排隊。。。 反例思路1 如果客戶多了,請求多,就容易混亂,他叫五串羊肉串,你叫三個烤雞翅,老闆哪裡忙得過來。代碼中的體現就是一句一句輸出,所以應該要有個服務員。。。 門面改造 Talk is cheap, show me ...
  • 舉個慄子 在M和N兩種品牌的手機裡面各做通訊錄和游戲兩種軟體。前提:M和N手機之間不通用。 反例思路1 以手機品牌為主體,各自實現軟體。 反例思路2 以手機軟體為主體,各自適配品牌。 弊端說明 對象的繼承關係是在編譯時就定義好了,所以無法在運行時改變從父類繼承的實現。 子類的實現與它的父類有非常緊密 ...
  • 想象一下你馬上出發要去一家餐廳吃飯,但是你去之前不確定會不會滿桌,你又不想排號。這時的你會有兩個選擇,如果你是個樂觀的人,內心戲可能會是「管他的,去了再說,大不了沒座就回來」。反之,如果你是一個悲觀的人,可能會先打個電話預約一下,先確認下肯定有座,同時交點定金讓餐廳預留好這個座位,這樣就可以直接去了 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...