Facebook 架构学习
轉自:http://www.dbanotes.net/arch/facebook_arch_note.html
在 QCon 2008 (舊金山站) 上Facebook 做的這個技術分享有不少值得借鑒的東西。所以,暫停對 QCon 北京的回顧,臨時插播一貼。
設計原則
- 盡可能的使用開源軟件,并且在需要優化的時候進行優化
- Unix 哲學。包括,模塊化原則;整合化原則;清晰化原則等
- 任何組件具備擴展性
- 最小化故障影響
- 簡化,簡化,簡化!
架構概覽
Facebook 是 LAMP 的堅定支持者,也差不多是用 LAMP (或許用 LAM2P 更適合) 實現的最大的動態站點。
基礎組件加上服務,中間用自己實現的一些工具進行粘合。其中關于運維細節的事情基本不會說出來的,這是很多公司的軟實力所在。
PHP 經驗
參見《Facebook 的 PHP 性能與擴展性》
MySQL 經驗
- 主要用于做 Key-Value 類型的存儲操作,數據隨機分布在多臺邏輯實例上,訪問多數基于全局 ID 。
- 邏輯實例分散在多臺物理主機上(超過1800臺),負載均衡在物理層進行。
- 不做讀復制。
- 盡量不做邏輯數據遷移(成本太高)。
- 不做 JOIN 操作 (豆瓣在 QCon 上也闡述了這一點)。數據是隨機分布的,關聯操作反而帶來了極大的復雜度。
- 對于數據訪問,主要的操作集中在最新的數據上,針對這部分做優化,舊的數據進行歸檔。
- 在中心 DB 絕不存儲非靜態數據。
- 使用服務或者 Memcached 進行全局查詢。
?
Memcached 經驗
參見我以前的筆記:Facebook 的 Memcached 擴展經驗。Facebook 對 Memcached 做了不小的改進。另外,順便說一下,前兩天 Memcached 剛在 1.2.7 發布幾天之后又發布了新版本 1.2.8,修正了一些問題。
一個比較有價值的是關于個人頁面數據的獲取的描述。這個就完全是需要做單頁面 Benchmark 的細致活兒了,可能還需要產品經理能夠理解工程師的"抵抗"。
- 獲取個人信息數據:通過Cache,隱性通過用戶所在的 DB 獲取(基于 User-ID 獲知 DB)
- 獲取朋友連接信息:通過Cache,否則的話通過DB(基于 User-ID 獲知 DB)
- 并行抓取每個朋友的 10個照片相冊 ID ,從Cache抓取,如果失效,再從 DB 抓取(基于相冊 ID)
- 并行抓取最近相冊中的照片數據
- 運行PHP 把整個業務邏輯跑出來
- 返回數據給用戶
然后是對 Facebook 非 LAMP 體系的東西做了一番介紹,基本上也開源了。最后參考兩個架構圖。
Facebook NewsFeed 的架構示意圖
Facebook 搜索功能的架構示意圖
管中窺豹,盲人摸象而已。
?
轉載于:https://www.cnblogs.com/junzhongxu/archive/2009/06/03/1495107.html
總結
以上是生活随笔為你收集整理的Facebook 架构学习的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: ma应用、超级短线、分钟短线买卖和看盘心
- 下一篇: jQuery教程(十三)jQuery L