本文轉載自石杉的架構筆記 “ 這篇文章來聊一下Kafka的一些架構設計原理，這也是互聯網公司面試時非常高頻的技術考點。 Kafka是高吞吐低延遲的高並發、高性能的消息中間件，在大數據領域有極為廣泛的運用。配置良好的Kafka集群甚至可以做到每秒幾十萬、上百萬的超高並發寫入 ...

最近項目中使用到了Sqlite3來保存結果數據，大約100萬條數據，插入到sqlite數據庫中竟然耗時5分鍾，這在真個數據處理流程中占用了太多的時間，是不可接受的，那么如何優化sqlite的寫數據的性 ...

直播彈幕指直播間的用戶，禮物，評論，點贊等消息，是直播間交互的重要手段。美拍直播彈幕系統從 2015 年 11 月到現在，經過了三個階段的演進，目前能支撐百萬用戶同時在線。比較好地詮釋了根據項目的發展階段，進行平衡演進的過程。這三個階段分別是快速上線，高可用保障體系建設，長連接 ...

...

Kafka是高吞吐低延遲的高並發、高性能的消息中間件，在大數據領域有極為廣泛的運用。配置良好的Kafka集群甚至可以做到每秒幾十萬、上百萬的超高並發寫入。 那么Kafka到底是如何做到這么高的吞吐量和性能的呢？這篇文章我們來一點一點說一下。 1、頁緩存技術 + 磁盤順序寫 首先Kafka ...

實現一次性群發上百萬封郵件公司最近要做群發郵件功能，是發給上百萬客戶；可是這個群發量大會導致很多問題 1、海量郵件群發：要保證群發系統穩定性，能支持日處理百萬級千萬級的海量投遞；　　2、IP進入黑名單：能處理IP地址或域名被郵件運營商列為黑名單問題；　　3、成功送達率：在發布內容合法 ...

在上一章中，我們講解了ConcurrentHashMap的讀取效率很高的原因，一般來說並發的讀取和寫入是一對矛盾體，而緩存的過期移除和持久化則是另一對矛盾體。這一節，我們着重來了解下高並發情況下緩存的寫入、過期控制及周邊相關功能。 　　系列文章 ...

詳見：http://blog.yemou.net/article/query/info/tytfjhfascvhzxcyt207 一般來說並發的讀取和寫入是一對矛盾體，而緩存的過期移除和持久化則是另一對矛盾體。這一節，我們着重來了解下高並發情況下緩存的寫入、過期控制及周邊相關功能。系列文章 ...