當前位置:首頁 » 存儲配置 » 微博存儲

微博存儲

發布時間: 2023-04-18 01:02:33

Ⅰ 微博如何使用大數據存儲技術

Mongodb和Redis,Mongodb可以滿足大量數據的存儲,Redis是內存資料庫,適合Key-Value形式的快速讀寫,適合做緩存,佔用內存資源多,不適合存儲大量數據。

微博是近幾年發展得極為火熱的信息發布和分享平台,可以發布微博、分享信息、評論和參與話題的討論。為了讓用戶及時了解到最熱門的話題、最熱門的信息。

需要對微博系統中的數據進行實時處理和分析。而Storm是一個免費開源、分布式的、具有很好容錯性的實時計算系統,通過Storm可以實時處理微博系統中的數據,並根據處理結果向用戶進行實時熱門推送。

微博大數據:

微博其實和淘寶是很類似的。一般來說,第一代架構,基本上能支撐到用戶到 百萬 級別,到第二代架構基本能支撐到 千萬 級別都沒什麼問題,當業務規模到 億級別時,需要第三代的架構。

從LAMP的架構到面向服務的架構,有幾個地方是非常難的,首先不可能在第一代基礎上通過簡單的修修補補滿足用戶量快速增長的,同時線上業務又不能停,這是我們常說的在飛機上換引擎的問題。

建議在做服務化的時候,首先更多是偏向業務的梳理,同時要找准一個很好的切入點,既有架構和服務化上的提升,業務方也要有收益,比如提升性能或者降低維護成本同時升級過程要平滑,建議開始從原子化服務切入,比如基礎的用戶服務, 基礎的短消息服務,基礎的推送服務。

第二,就是可 以做無狀態服 務,後面會詳細講,還有數據量大了後需要做數據Sharding,後面會將。第三代 架構 要解決的 問題,就是用戶量和業務趨於穩步增加(相對爆發期的指數級增長),更多考慮技術框架的穩定性, 提升系統整體的性能,降低成本,還有對整個系統監控的完善和升級。

熱點內容
java返回this 發布:2025-10-20 08:28:16 瀏覽:585
製作腳本網站 發布:2025-10-20 08:17:34 瀏覽:881
python中的init方法 發布:2025-10-20 08:17:33 瀏覽:574
圖案密碼什麼意思 發布:2025-10-20 08:16:56 瀏覽:761
怎麼清理微信視頻緩存 發布:2025-10-20 08:12:37 瀏覽:678
c語言編譯器怎麼看執行過程 發布:2025-10-20 08:00:32 瀏覽:1005
郵箱如何填寫發信伺服器 發布:2025-10-20 07:45:27 瀏覽:251
shell腳本入門案例 發布:2025-10-20 07:44:45 瀏覽:108
怎麼上傳照片瀏覽上傳 發布:2025-10-20 07:44:03 瀏覽:799
python股票數據獲取 發布:2025-10-20 07:39:44 瀏覽:705