算法背景 如果想判斷一個元素是不是在一個集合里，一般想到的是將集合中所有元素保存起來，然后通過比較確定。鏈表、樹、散列表（又叫哈希表，Hash table）等等數據結構都是這種思路，存儲位置要么是磁盤，要么是內存。很多時候要么是以時間換空間，要么是以空間換時間。 在響應時間要求比較嚴格的情況下 ...

參考資料：http://www.cnblogs.com/robinli/archive/2011/03/02/1969314.html ...

　　最近在公司備份數據庫數據，簡單的看了一下。當然我用的是簡單的手動備份。 　　第一：其實最好的方法是直接用： 　　mysqldump -u用戶名 -p密碼 數據庫名 < 數據庫名.sql 在linux在操作的，測試過一個一萬多行的導入數據，共121m。在linux下，幾秒 ...

bloom-filter 算法 場景：我說的大數據量處理是指同時需要對數據進行檢索查詢，同時有高並發的增刪改操作； 記得以前在XX做電力時，幾百萬條數據，那時一個檢索查詢可以讓你等你分鍾； 現在我是想探討下對大數據量的處理，那時我就在想例如騰訊，盛大，動輒數以億計的帳號,怎么能 ...

近幾天做了一個項目，需要解析大量的json數據，有一萬多條，以前我用的都是Gson包去自動解析，但是速度真是不敢恭維，於是我又去查了其它的方法，發現fastjson的解析，發現速度直的是很快，在此我不得不佩服，這個包的作者，直是很厲害，能寫出這樣一個工具，我在網上看了，這個工具還有很多問題，但也 ...

前言 之前在做項目的時候，接觸到的千萬級以上的表數據不是太多，對於聯合索引的認知不是太深刻，用索引與不用索引以及索引的創建順序和規則之前的區別不是太明顯，最近手頭有優化查詢千萬級數據量的慢sql的任務，優化前，查詢時間達到了60秒，導致前端請求掛起，做了相應的優化后，查詢千萬級別數據時 ...

一、數據庫結構的設計 如果不能設計一個合理的數據庫模型，不僅會增加客戶端和服務器段程序的編程和維護的難度，而且將會影響系統實際運行的性能。所以，在一個系統開始實施之前，完備的數據庫模型的設計是必須的。 在一個系統分析、設計階段，因為數據量較小，負荷較低。我們往往只注意到功能 ...

硬盤，把所有這些數據都存儲進去，大數據其實也挺簡單嘛。對此，只能說： 首先必須明確一點：我們為什 ...