一個資料庫讀寫模型的設想

来源:http://www.cnblogs.com/lsm19870508/archive/2016/04/02/5348046.html
-Advertisement-
Play Games

最近這幾天,一直在思考寫伺服器的時候怎麼做資料庫的讀寫服務,用什麼架構來做這個事情,現在終於有了一個大概的想法,用redis+mysql的方法。 目前業內有兩種思路,一種是full-mem模式,即全用redis存儲這種方式。另外一種是redis只存熱數據,大部分數據放到mysql里。具體選哪種還是要 ...


最近這幾天,一直在思考寫伺服器的時候怎麼做資料庫的讀寫服務,用什麼架構來做這個事情,現在終於有了一個大概的想法,用redis+mysql的方法。
        目前業內有兩種思路,一種是full-mem模式,即全用redis存儲這種方式。另外一種是redis只存熱數據,大部分數據放到mysql里。具體選哪種還是要看具體的需求。
        一般而言,純redis用於數據量比較小,讀寫極為頻繁的狀況,而redis+mysql結合是用於解決數據量比較大,而且冷數據比較多的情況。必定redis的價格還是蠻高的,一臺2G的redis節點阿裡雲只需要270一個月,而一臺256G的redis節點就要5W一個月,一年就是60W,用來發點獎金啥的都挺好的。
        我決定暫時用redis+mysql結合的方式,redis中只存3天或7天以後用戶訪問過的數據,mysql中存儲其他的數據。大概思路如下:
        啟動階段:
        從mysql中讀取一部分常用的不會在伺服器運行過程中修改的配置表,根據實際需求初始化成各種redis的表,方便查詢。比如一個道具配置表的結構是:  

CREATE TABLE `standard_item` (
  `sn` int(10) unsigned NOT NULL AUTO_INCREMENT COMMENT 'sn',
  `id` int(10) unsigned NOT NULL DEFAULT '0' COMMENT '物品id',
  `name` varchar(50) NOT NULL DEFAULT '11' COMMENT '道具名',
  `type` tinyint(4) NOT NULL DEFAULT '0' COMMENT '類型',
  `sub_type` smallint(5) unsigned NOT NULL DEFAULT '0',
  `quality` tinyint(4) NOT NULL DEFAULT '0' COMMENT '品質',
  `stacked_num` smallint(6) NOT NULL DEFAULT '0' COMMENT '堆疊數量',
  `use_num` smallint(6) NOT NULL DEFAULT '0' COMMENT '使用數量',
  `is_use` tinyint(4) NOT NULL DEFAULT '0',
  `price` smallint(6) NOT NULL DEFAULT '0',
  `effect` varchar(50) DEFAULT NULL,
  `version` int(10) NOT NULL DEFAULT '0' COMMENT '球員碎片對應的版本',
  PRIMARY KEY (`sn`),
  KEY `IX_Type` (`type`) USING BTREE
) ENGINE=InnoDB AUTO_INCREMENT=2478 DEFAULT CHARSET=utf8 COMMENT='標準物品表';

這個表在redis中存儲一般會是以standard_item:id為key的哈希表,但是策劃如果有需求根據type和quality查詢所有道具的話,我就應該在初始化的階段將standard_item多轉存出幾個standard_item:type:quality為主鍵的set來,以啟動時候預處理的時間來換取運行階段大量查詢的時間,或者避免用戶查詢的時候擊穿redis到mysql資料庫。
    啟動完成以後,讀運算:
    用戶請求伺服器===》 伺服器查詢redis是否有用戶緩存
                                                ===》如果有返回數據併進行對應運算
                                                ===》如果沒有,擊穿緩存層,訪問mysql資料庫讀取數據===》返回數據並保存至redis,標記3天後過期
    啟動完成後,寫運算:
    伺服器有寫請求===》將寫請求置入寫的隊列,解除數據的過期時間
    寫數據的線程===》如果隊列中有需要寫的數據,就取出一條進行mysql寫操作===》寫入成功,標記redis數據3天後過期
                                                                                                                            ===》寫入失敗,重寫至次數嘗試超過限定次數,寫日誌
                         ===》如果隊列中沒有需要寫的數據,休眠一小會 

明天按照這個思路試著做套資料庫讀寫機制試下。 


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 實現了那些功能,先看看效果圖: 項目工程目錄: 接下來開始具體的步驟: 第一步:在VS中新建工程 第二步:使用NuGet 安裝EntityFramework 第三步:使用NuGet 安裝EntityFramework.SqlSreverCompact 第四步:在Entities文件夾下添加Stude ...
  • 一、WCF概述 1) 什麼是WCF? Windows Communication Foundation (WCF) 是用於構建面向服務的應用程式的框架。藉助 WCF,可以將數據作為非同步消息從一個服務終結點發送至另一個服務終結點。服務終結點可以是由 IIS 承載的持續可用的服務的一部分,也可以是應用程 ...
  • 先看圖,這是幾個月前用NPOI寫的導出數據到Excel,用了上百行代碼,而且難控制,導出來也比較難看 excel打開的效果 下麵是我用ExcelReport類庫導出到Excel的操作 1.首先引用ExcelReport類庫,使用NuGet即可 2.現在就可以寫導出的代碼,ExcelReport已經提 ...
  • C#數據進行顯示轉換時有可能會出現溢出的情況這時可以用關鍵字checked進行檢查是否溢出: checked(<expression>) 檢查溢出 unchecked(<expression>) 不檢查溢出 如果使用checked檢查溢出,一旦溢出就會拋出System.OverflowExcepti ...
  • 開始設置視窗的具體的位置的時候,我就只能通過在windows的屬性設置的StartPosition直接隨便設置為CenterScreen,這樣也挺方便的,直接居中顯示咯。 可是後面出現了另一個問題,就是我其他的窗體,我想指定他在某個具體的位置出現,查了好久才知道StartPosition的Manua ...
  • "Microsoft Build 2016 Day 1 記錄" Microsoft Build 2016 進行到了第二天,我覺得這一天的內容非常精彩,因為主要和開發者相關
  • WordPress編輯器對SVG的支持一向是非常的不友好,首先它不能上傳SVG文件,也不能自動的嵌入到內容中讓它正常顯示。同時,對內聯SVG代碼根本不識別,會無情的將SVG代碼自動刪除。 在上一篇文章中我介紹瞭如何讓Wordpress支持上傳SVG圖片的方法,似乎是部分的解決了這個問題。最近在開發過 ...
  • 註:本文參考自 http://www.jianshu.com/p/0465a2b837d2 swagger用於定義API文檔。 好處: 前後端分離開發 API文檔非常明確 測試的時候不需要再使用URL輸入瀏覽器的方式來訪問Controller 傳統的輸入URL的測試方式對於post請求的傳參比較麻煩 ...
一周排行
    -Advertisement-
    Play Games
  • 示例項目結構 在 Visual Studio 中創建一個 WinForms 應用程式後,項目結構如下所示: MyWinFormsApp/ │ ├───Properties/ │ └───Settings.settings │ ├───bin/ │ ├───Debug/ │ └───Release/ ...
  • [STAThread] 特性用於需要與 COM 組件交互的應用程式,尤其是依賴單線程模型(如 Windows Forms 應用程式)的組件。在 STA 模式下,線程擁有自己的消息迴圈,這對於處理用戶界面和某些 COM 組件是必要的。 [STAThread] static void Main(stri ...
  • 在WinForm中使用全局異常捕獲處理 在WinForm應用程式中,全局異常捕獲是確保程式穩定性的關鍵。通過在Program類的Main方法中設置全局異常處理,可以有效地捕獲並處理未預見的異常,從而避免程式崩潰。 註冊全局異常事件 [STAThread] static void Main() { / ...
  • 前言 給大家推薦一款開源的 Winform 控制項庫,可以幫助我們開發更加美觀、漂亮的 WinForm 界面。 項目介紹 SunnyUI.NET 是一個基於 .NET Framework 4.0+、.NET 6、.NET 7 和 .NET 8 的 WinForm 開源控制項庫,同時也提供了工具類庫、擴展 ...
  • 說明 該文章是屬於OverallAuth2.0系列文章,每周更新一篇該系列文章(從0到1完成系統開發)。 該系統文章,我會儘量說的非常詳細,做到不管新手、老手都能看懂。 說明:OverallAuth2.0 是一個簡單、易懂、功能強大的許可權+可視化流程管理系統。 有興趣的朋友,請關註我吧(*^▽^*) ...
  • 一、下載安裝 1.下載git 必須先下載並安裝git,再TortoiseGit下載安裝 git安裝參考教程:https://blog.csdn.net/mukes/article/details/115693833 2.TortoiseGit下載與安裝 TortoiseGit,Git客戶端,32/6 ...
  • 前言 在項目開發過程中,理解數據結構和演算法如同掌握蓋房子的秘訣。演算法不僅能幫助我們編寫高效、優質的代碼,還能解決項目中遇到的各種難題。 給大家推薦一個支持C#的開源免費、新手友好的數據結構與演算法入門教程:Hello演算法。 項目介紹 《Hello Algo》是一本開源免費、新手友好的數據結構與演算法入門 ...
  • 1.生成單個Proto.bat內容 @rem Copyright 2016, Google Inc. @rem All rights reserved. @rem @rem Redistribution and use in source and binary forms, with or with ...
  • 一:背景 1. 講故事 前段時間有位朋友找到我,說他的窗體程式在客戶這邊出現了卡死,讓我幫忙看下怎麼回事?dump也生成了,既然有dump了那就上 windbg 分析吧。 二:WinDbg 分析 1. 為什麼會卡死 窗體程式的卡死,入口門檻很低,後續往下分析就不一定了,不管怎麼說先用 !clrsta ...
  • 前言 人工智慧時代,人臉識別技術已成為安全驗證、身份識別和用戶交互的關鍵工具。 給大家推薦一款.NET 開源提供了強大的人臉識別 API,工具不僅易於集成,還具備高效處理能力。 本文將介紹一款如何利用這些API,為我們的項目添加智能識別的亮點。 項目介紹 GitHub 上擁有 1.2k 星標的 C# ...