Facebook運維內(nèi)幕曝光：一人管理2萬臺服務(wù)器

Facebook是世界上最大的社交網(wǎng)站，有超過10億用戶每月至少要登錄一次，他們每天要上傳超過45億內(nèi)容，在這么大的數(shù)據(jù)面前，F(xiàn)acebook的工程師們是如何保證網(wǎng)站時時刻刻正常運營的呢？不僅如此，F(xiàn)acebook已經(jīng)憑借它在網(wǎng)絡(luò)基礎(chǔ)建設(shè)上的可擴(kuò)展能力成為了行業(yè)的領(lǐng)軍者。下面就讓我們一起來看看Facebook內(nèi)部的運維數(shù)據(jù)。

Facebook數(shù)據(jù)中心運維主管 Delfina Eberly

服務(wù)器數(shù)量驚人，一人管理 2 萬臺

Facebook服務(wù)器數(shù)量驚人，其硬件方面的工作重點主要放在“可服務(wù)性”上，內(nèi)容也涉及服務(wù)器的初期設(shè)計，一系列工作的目標(biāo)就是為了保證數(shù)據(jù)機(jī)房的設(shè)備維修最簡單、最省時。Facebook數(shù)據(jù)中心運維主管 Delfina Eberly介紹說，每個Facebook 數(shù)據(jù)中心的運維工作人員管理了至少 20,000 臺服務(wù)器，其中部分員工會管理數(shù)量高達(dá) 26,000 多個的系統(tǒng)。 

近期 Facebook 的服務(wù)器與管理人數(shù)比又創(chuàng)下了新高，目前已經(jīng)超過10000:1，可以查看文章高擴(kuò)展性對此進(jìn)行更加詳細(xì)的了解。 

大數(shù)據(jù)洶涌，運維工作不輕松

在Facebook數(shù)據(jù)中心做運維工作并不輕松，對工作人員的能力要求很高。他們每天面對的是海量數(shù)據(jù)。 

據(jù)統(tǒng)計，F(xiàn)acebook目前擁有11.5億用戶，日常登錄用戶約7.2 億。每天Facebook 用戶分享的內(nèi)容達(dá)到 47.5 億條，“贊”按鈕點擊次數(shù)近45億次。Facebook目前存儲了2400億張照片，每月照片存儲容量約增加7PB（注，單位換算：1PB=1024TB）。 

自動故障診斷系統(tǒng)：原為留住人才

為了管理運維工作，F(xiàn)acebook 已經(jīng)開發(fā)了相應(yīng)軟件來自動化處理日常運維任務(wù)，如 CYBORG 可自動檢測服務(wù)器問題并進(jìn)行修復(fù)。如果 CYBORG 無法自動修復(fù)檢查出的問題，系統(tǒng)將自動給訂單系統(tǒng)發(fā)送警告，并分派給數(shù)據(jù)中心工作人員，以對相應(yīng)問題進(jìn)行詳細(xì)追蹤與分析。 

Eberly 提到，自動化工作的目標(biāo)是盡量避免將技術(shù)人員派往現(xiàn)場解決問題，除非必須對服務(wù)器進(jìn)行現(xiàn)場處理。強(qiáng)調(diào)自動化不是因為 Facebook 對打造無人數(shù)據(jù)中心感興趣，原因在于 Facebook 重視自己的員工。 

Eberly 解釋說：我們要留住人才，因為大家更喜歡高水平的任務(wù)，公司希望讓他們留下來與我們一起進(jìn)步成長，這對 Facebook 來說至關(guān)重要。 

“可服務(wù)性”主導(dǎo)服務(wù)器設(shè)計：節(jié)時 54%

在 Facebook，運維團(tuán)隊的時間與工作量是根據(jù) Facebook 硬件設(shè)計來安排的。比方說，全部服務(wù)器從頭開始就堅持“可服務(wù)性”這一原則來進(jìn)行設(shè)計，那么數(shù)據(jù)中心的工作人員就沒有必要老鉆機(jī)房了；服務(wù)器被設(shè)計成無需工具就可以對磁盤和組件進(jìn)行替換。這樣做的結(jié)果就是：Facebook 用來修理服務(wù)器的時間減少了 54%。 

Eberly 介紹說，F(xiàn)acebook 運維團(tuán)隊會仔細(xì)跟蹤設(shè)備故障率，這一數(shù)據(jù)會為公司的采購提供參考。公司的財產(chǎn)管理和訂單系統(tǒng)用序列號來跟蹤硬盤和其他組件，這方便完整了解每個硬件的生命周期。 

Eberly 還提到，雖然這些系統(tǒng)很復(fù)雜，但并不需要太多開發(fā)者。Facebook 的運維團(tuán)隊僅有 3 名軟件工程師，但他們對數(shù)據(jù)中心的工作來講至關(guān)重要。 

最后

從 以上的介紹中，我們可以看到 Facebook 在可擴(kuò)展性網(wǎng)絡(luò)建設(shè)上的實力。同時，這也為行業(yè)提供了一些可參考的經(jīng)驗，如：開發(fā)自動故障系統(tǒng)，根據(jù)“可服務(wù)性”設(shè)計基礎(chǔ)架構(gòu)。同時，運維也是一個系統(tǒng)工程，需要得到其他部門的配合支持才行。 

來自：Datacenterknowledge

生活不易，碼農(nóng)辛苦
如果您覺得本網(wǎng)站對您的學(xué)習(xí)有所幫助,可以手機(jī)掃描二維碼進(jìn)行捐贈