先進的Google技術核心GFS

来源:百度文库 编辑:神马文学网 时间:2024/04/19 12:55:12
cmplabs  2007/1/10
台灣恆春大地震引發的網絡大災難中,只有Google能在短時間內恢復服務,估計與其全球分散儲存系統Google File System〔GFS〕有關。
Google在全球設有17萬台伺服器〔2005年數字〕 採用自行研製的分散式檔案系統Google File System,這是一套能快速穩定及安全的資料儲存系統。
Google中國區總裁李開復說:「Google最厲害的技術是其檔案儲存系統,我認為電腦系的學生都應該看看GFS,Google的搜尋器、Gmail、Video、Blog等都是用這個技術做的。」
以Gmail系統為例,使用GFS,資料被分散至全球多個地方,每個用戶的電郵分三處備份,當一處的資料損毀時,另外兩處的備份則自動補上。數萬台伺服器同時運作,壞了一台,對系統沒有影響,只要換進一台,電腦便會自動取得Linux OS,自動安裝並起機,自動取回失去的資料備份,又變成網絡的一部分了。這種環球分散式檔案系統,才是Google的技術核心。
Google這套由十多萬台電腦組成的集群,每日自動搜尋新網頁、處理電郵、播放影片、提供衛星地圖、搜尋服務,並會自動分析網頁內容,自動刊出相關的文字廣告。在電纜中斷時,其他入門網站只能望天打卦、空等電纜修復,但Google就可轉存資料,自我逐步回復正常,GFS技術先進可見一斑。 ■
相關鏈接
Google GFS的技術論文
維基Google File System
查看原文