Redis存放日志及熱門文章

使用Redis的列表數據類型可以實現多種數據結構，可以將它看做php中的索引數組。它可以實現棧、隊列、消息隊列的多種數據結構。

今天，和大家介紹下，如何使用redis來保存系統日志及熱門文章列表。

存放日志

大家知道，nginx日志默認不會自動切割，它會一直存放一個文件中，一直追加寫入，需要我們自己做切割日志的操作。

除了nginx外，很多地方都有用到日志。出了問題后，日志是我們是我們查找線索的主要途徑之一。

我們現在打算將系統的日志寫入到redis中，每天的日志都記錄到一個list列表中，可以防止單個日志文件過大。

基本思路是，每天的日志信息都寫入到單獨的list列表中，然后做定時任務，定時任務的功能是取出1個月前的日志列表，將其持久化到文本文件中，然后刪除redis中1個月前的日志列表，防止redis占用過多內存。

可以使用壓縮函數將日志信息壓縮，減少內存占用。另外，再維護一個列表存日志列表的鍵名，方便取出日志列表鍵名。存放日志的偽代碼如下：

$log = ... // 日志信息
// 日志列表鍵名
$key = 'log:'.strtotime(date('Y-m-d'));

// 維護一個鍵名列表
if (!$redis->exists($key)) {
 $listlogkey = 'log:key';
 $redis->rpush($listlogkey, $key);
}

// 日志信息存放到redis中
$redis->rpush($key, $log);

定時任務代碼如下：

$lastMonth = strtotime("-30 day");

while ($logkey =  $redis->lpop('log:key')) {
    $logTime = explode(':', $logkey)[1];
    
    if ($logTime < $lastMonth) {
        // 從日志列表里去日志信息，一次取50條
        for ($start = 0, $end = 49;true;$start +=50, $end+=50) {
            $logs = $redis->lrange($logkey, $start, $end);
            if (!$logs) break;
            // 將日志信息解壓縮，然后追加寫入文本文件中
             ……
             
            // 刪除該日志列表
            $redis->del($logkey);
        }   
    } else {
        // 一個月之內的，重新push到左側
        $redis->lpush('log:key', $logkey);
        exit;
    }
}

這里有幾點需要注意，如果持久化日志失敗后，或者是近一個月內的日志，需要重新將日志列表鍵名從左側push。另外，從日志列表里取日志時，不要一次性全部取出，這樣容易導致redis阻塞。每次，取一定數量（如50條），循環取出。

存放熱門新聞ID

這里，就不貼代碼了，主要講講思路。以前我弄個一個系統，有一個版單功能，有今日最熱、一周最熱、一月最熱。

當時，我們的網站流量還挺大的，過不了幾天，網站就掛了。原因是，mysql的慢查詢問題。

因為，這塊的sql有分組、COUNT()、條件判斷等。

和大家說說我們的解決方案：寫一個mysql的存儲過程，定時調用存儲過程。

該存儲過程的作用是，篩選出今日、一周、一月最熱文章，分別取100條文章id，將其文章id存放到redis的隊列中。最熱文章，我們只展示前100條。

這樣，我們的系統就沒有了慢查詢了。

 

鏈接：https://mp.weixin.qq.com/s/vQH35szbg3roADAxsVTijw