其實我一直在准備另一篇博文的基礎資料,但是和朋友聊天,他問我最近在做什么,我說在做系統Log模塊,並和他交流了一下,於是這篇博客就應運而生
我的博客目錄:Index & Writing Plan
所有數據都可以用如下形式表述:ID,表名,列名,Value
比如說現在有這么一條數據要插入User表:
ID(Guid,這里為了方便理解用Int) | Username | Password | |
1 | CrazyJinn | 123456 | CrazyJinn@W.C |
這一條記錄可以轉換為:
ID | 表名 | 列名 | Value |
1 | User | Username | CrazyJinn |
1 | User | Password | 123456 |
1 | User | CrazyJinn@W.C |
你可以在各種對靈活性要求高的地方看到這種設計,比如說在《我們該如何設計數據庫(三)》的留言中,就有園友提到了類似的設計
當然,這種方式效率不是很高;不過可以把聚集索引加到表名上,然后非聚集索引加在列名上,再水平分割一下,如果你心情好,再做個讀寫分離,相信就非高並發、千萬數據量級的應用來說,理論上還是可以接受的
好了,現在進入正文
現在要做一個通用的Log模塊
既然是通用的,那就意味着靈活性要非常強,因為你不知道Log中要記錄的數據結構是如何的
而且給我的需求有一個非常變態的地方:要有回退功能。不過這個我們先不去管他
根據之前的討論,我們可以很容易設計出一張Log表
ID | 表名 | 列名 | Type(Create\Edit\Delete) | Value | 最后修改時間 |
如果處理的全是無關系的問題,這樣做就足夠了。但是要知道,RDBMS,最重要的就是關系的處理
比如說要Log這樣兩張表:
上文所設計出的Log表面對這樣的一對多關系是無法儲存的,不要往了,我們還有多對多關系
當然可以拓展Log表來實現儲存一對多/多對多關系,雖然我不確定能不能做到,因為我沒有就這方面去深入的思考。如果您想到了好的設計,歡迎留言和我探討
讓我們來重新思考一下Log模塊的本質:
1、大量數據
2、只是大量數據(和別的模塊沒有關聯,純粹的數據)
這種場景讓我不由自主的想到了Nosql。在這里,使用MongoDB來實現。關於MongoDB入門,可以參考下面兩篇文章:
Fish Li:《MongoDB實戰開發 【零基礎學習,附完整Asp.net示例】》
MongoDB使用Bson來儲存數據,你可以簡單的把Bson理解為Json。眾所周知,Json是一個非常易於擴充的,松散的的數據格式;基於Json易於擴充的特性,我們可以這樣來設計Log表
LogID | ID | 表名 | Content(所儲存的內容,包含了最后修改時間,修改類型,以及新的修改ID) |
如果我對User表修改了6次,那么我們Log的數據如下圖:
我們主要把注意力集中在上圖用紅框標注的3條數據上
第一條數據,ContactList是一個Array類型,長度為0,這表示沒有對應的Contact
第二條數據,ContactList長度變為1,這表示這次修改為User添加了一個Contact的關聯,我們將第二條數據完全展開來看:
可以看到,包含了一個完整的Contact進來
第三條數據ContactList為Null,這表示我在某個別的地方修改了User信息。這次修改沒有涉及Contact,所以保存為Null。當我們取數據的時候,如果發現某個List為Null,就要遞歸的向上去查找不為Null的數據。例如我這里,就要去找到第二條數據的ContactList
為了方便大家理解,我把Json貼在下面。對照前面的圖片可以很好的閱讀
{ "Content" : [{ "_id" : new BinData(3, "mtonv7sMCkewsMIjWZ9/qg=="), "Username" : "1", "Password" : "1", "Number" : 1, "LastModified" : new Date("27/11/2012 10:28:18"), "ContactList" : [{ "_id" : new BinData(3, "1QwcXGKedUCO27QprZB26Q=="), "UserID" : new BinData(3, "YyQDfuoj6EuuDNl91leigA=="), "Phone" : "Phone1", "Email" : "Email1" }, { "_id" : new BinData(3, "EeWfiFCknkex4H2jEraR/w=="), "UserID" : new BinData(3, "YyQDfuoj6EuuDNl91leigA=="), "Phone" : "Phone2", "Email" : "Email2" }] }, { "_id" : new BinData(3, "Afk3spV0q0uKM+yNs/SHbw=="), "Username" : "1 to 2", "Password" : "1 to 2", "Number" : 2, "LastModified" : new Date("27/11/2012 10:35:03"), "ContactList" : [] }, { "_id" : new BinData(3, "H/5o2lizmUWkaxAZUgNHzg=="), "Username" : "2 to 3", "Password" : "2 to 3", "Number" : 3, "LastModified" : new Date("27/11/2012 10:40:28"), "ContactList" : [{ "_id" : new BinData(3, "7HDyGU2+A02HbQtUFbOo8A=="), "UserID" : new BinData(3, "H/5o2lizmUWkaxAZUgNHzg=="), "Phone" : "PhoneNew", "Email" : "EmailNew" }] }, { "_id" : new BinData(3, "zf2SiYW81kufGO7ZgY5r3A=="), "Username" : "3 to 4", "Password" : "3 to 4", "Number" : 4, "LastModified" : new Date("27/11/2012 10:41:34"), "ContactList" : null }, { "_id" : new BinData(3, "N68jDslbU0uvdHJTSq0vIg=="), "Username" : "5", "Password" : "6", "Number" : 7, "LastModified" : new Date("27/11/2012 17:14:12"), "ContactList" : null }, { "_id" : new BinData(3, "Fw6OqMNcc0K+rySfgz3dTg=="), "Username" : "9", "Password" : "9", "Number" : 9, "LastModified" : new Date("27/11/2012 17:16:15"), "ContactList" : [{ "_id" : new BinData(3, "zfsQRK5A0kGFFcnc5TZ9GA=="), "UserID" : new BinData(3, "YyQDfuoj6EuuDNl91leigA=="), "Phone" : "PhoneNew", "Email" : "EmailNew" }] }], "ModelID" : new BinData(3, "YyQDfuoj6EuuDNl91leigA=="), "ModelName" : "User", "_id" : ObjectId("50b4254257751f09a02decba") }
這樣,一個Log功能的雛形就出來了
就此擱筆
PS:我寫了個小的Demo,但是很亂,就不放上來了。有興趣的朋友可以留郵箱,我會發過去的