一個資料庫讀寫模型的設想

来源:http://www.cnblogs.com/lsm19870508/archive/2016/04/02/5348046.html
-Advertisement-
Play Games

最近這幾天,一直在思考寫伺服器的時候怎麼做資料庫的讀寫服務,用什麼架構來做這個事情,現在終於有了一個大概的想法,用redis+mysql的方法。 目前業內有兩種思路,一種是full-mem模式,即全用redis存儲這種方式。另外一種是redis只存熱數據,大部分數據放到mysql里。具體選哪種還是要 ...


最近這幾天,一直在思考寫伺服器的時候怎麼做資料庫的讀寫服務,用什麼架構來做這個事情,現在終於有了一個大概的想法,用redis+mysql的方法。
        目前業內有兩種思路,一種是full-mem模式,即全用redis存儲這種方式。另外一種是redis只存熱數據,大部分數據放到mysql里。具體選哪種還是要看具體的需求。
        一般而言,純redis用於數據量比較小,讀寫極為頻繁的狀況,而redis+mysql結合是用於解決數據量比較大,而且冷數據比較多的情況。必定redis的價格還是蠻高的,一臺2G的redis節點阿裡雲只需要270一個月,而一臺256G的redis節點就要5W一個月,一年就是60W,用來發點獎金啥的都挺好的。
        我決定暫時用redis+mysql結合的方式,redis中只存3天或7天以後用戶訪問過的數據,mysql中存儲其他的數據。大概思路如下:
        啟動階段:
        從mysql中讀取一部分常用的不會在伺服器運行過程中修改的配置表,根據實際需求初始化成各種redis的表,方便查詢。比如一個道具配置表的結構是:  

CREATE TABLE `standard_item` (
  `sn` int(10) unsigned NOT NULL AUTO_INCREMENT COMMENT 'sn',
  `id` int(10) unsigned NOT NULL DEFAULT '0' COMMENT '物品id',
  `name` varchar(50) NOT NULL DEFAULT '11' COMMENT '道具名',
  `type` tinyint(4) NOT NULL DEFAULT '0' COMMENT '類型',
  `sub_type` smallint(5) unsigned NOT NULL DEFAULT '0',
  `quality` tinyint(4) NOT NULL DEFAULT '0' COMMENT '品質',
  `stacked_num` smallint(6) NOT NULL DEFAULT '0' COMMENT '堆疊數量',
  `use_num` smallint(6) NOT NULL DEFAULT '0' COMMENT '使用數量',
  `is_use` tinyint(4) NOT NULL DEFAULT '0',
  `price` smallint(6) NOT NULL DEFAULT '0',
  `effect` varchar(50) DEFAULT NULL,
  `version` int(10) NOT NULL DEFAULT '0' COMMENT '球員碎片對應的版本',
  PRIMARY KEY (`sn`),
  KEY `IX_Type` (`type`) USING BTREE
) ENGINE=InnoDB AUTO_INCREMENT=2478 DEFAULT CHARSET=utf8 COMMENT='標準物品表';

這個表在redis中存儲一般會是以standard_item:id為key的哈希表,但是策劃如果有需求根據type和quality查詢所有道具的話,我就應該在初始化的階段將standard_item多轉存出幾個standard_item:type:quality為主鍵的set來,以啟動時候預處理的時間來換取運行階段大量查詢的時間,或者避免用戶查詢的時候擊穿redis到mysql資料庫。
    啟動完成以後,讀運算:
    用戶請求伺服器===》 伺服器查詢redis是否有用戶緩存
                                                ===》如果有返回數據併進行對應運算
                                                ===》如果沒有,擊穿緩存層,訪問mysql資料庫讀取數據===》返回數據並保存至redis,標記3天後過期
    啟動完成後,寫運算:
    伺服器有寫請求===》將寫請求置入寫的隊列,解除數據的過期時間
    寫數據的線程===》如果隊列中有需要寫的數據,就取出一條進行mysql寫操作===》寫入成功,標記redis數據3天後過期
                                                                                                                            ===》寫入失敗,重寫至次數嘗試超過限定次數,寫日誌
                         ===》如果隊列中沒有需要寫的數據,休眠一小會 

明天按照這個思路試著做套資料庫讀寫機制試下。 


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 實現了那些功能,先看看效果圖: 項目工程目錄: 接下來開始具體的步驟: 第一步:在VS中新建工程 第二步:使用NuGet 安裝EntityFramework 第三步:使用NuGet 安裝EntityFramework.SqlSreverCompact 第四步:在Entities文件夾下添加Stude ...
  • 一、WCF概述 1) 什麼是WCF? Windows Communication Foundation (WCF) 是用於構建面向服務的應用程式的框架。藉助 WCF,可以將數據作為非同步消息從一個服務終結點發送至另一個服務終結點。服務終結點可以是由 IIS 承載的持續可用的服務的一部分,也可以是應用程 ...
  • 先看圖,這是幾個月前用NPOI寫的導出數據到Excel,用了上百行代碼,而且難控制,導出來也比較難看 excel打開的效果 下麵是我用ExcelReport類庫導出到Excel的操作 1.首先引用ExcelReport類庫,使用NuGet即可 2.現在就可以寫導出的代碼,ExcelReport已經提 ...
  • C#數據進行顯示轉換時有可能會出現溢出的情況這時可以用關鍵字checked進行檢查是否溢出: checked(<expression>) 檢查溢出 unchecked(<expression>) 不檢查溢出 如果使用checked檢查溢出,一旦溢出就會拋出System.OverflowExcepti ...
  • 開始設置視窗的具體的位置的時候,我就只能通過在windows的屬性設置的StartPosition直接隨便設置為CenterScreen,這樣也挺方便的,直接居中顯示咯。 可是後面出現了另一個問題,就是我其他的窗體,我想指定他在某個具體的位置出現,查了好久才知道StartPosition的Manua ...
  • "Microsoft Build 2016 Day 1 記錄" Microsoft Build 2016 進行到了第二天,我覺得這一天的內容非常精彩,因為主要和開發者相關
  • WordPress編輯器對SVG的支持一向是非常的不友好,首先它不能上傳SVG文件,也不能自動的嵌入到內容中讓它正常顯示。同時,對內聯SVG代碼根本不識別,會無情的將SVG代碼自動刪除。 在上一篇文章中我介紹瞭如何讓Wordpress支持上傳SVG圖片的方法,似乎是部分的解決了這個問題。最近在開發過 ...
  • 註:本文參考自 http://www.jianshu.com/p/0465a2b837d2 swagger用於定義API文檔。 好處: 前後端分離開發 API文檔非常明確 測試的時候不需要再使用URL輸入瀏覽器的方式來訪問Controller 傳統的輸入URL的測試方式對於post請求的傳參比較麻煩 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...