【杭州網(wǎng)站設(shè)計(jì)】Facebook為何選擇Hadoop和HBase
分享 2011.06.11 瀏覽次數(shù):12040次
前段時(shí)間Facebook的新版消息系統(tǒng)發(fā)布,F(xiàn)acebook對(duì)HBase的成功使用也使得很多的HBase案例得以出現(xiàn),F(xiàn)acebook的Hadoop工程師Dhruba Borthakur發(fā)表了Hadoop系列文章對(duì)Facebook選擇Hadoop和HBase的原因做了一個(gè)說明。
Dhruba Borthakur首先總結(jié)了Hadoop和HBase的優(yōu)勢(shì)。他認(rèn)為HBase橫向擴(kuò)展性強(qiáng)。對(duì)Facebook這種少量數(shù)據(jù)存儲(chǔ)場(chǎng)景來說,擴(kuò)容幾乎是家常便飯,HBase能夠使數(shù)據(jù)擴(kuò)容非常容易。并且支持很高的寫吞吐。Facebook的消息數(shù)據(jù)很龐大,每天的寫量也很大。同時(shí)在同一個(gè)數(shù)據(jù)中心,能夠保證有較強(qiáng)的一致性。Facebook用HBase來存儲(chǔ)消息數(shù)據(jù),業(yè)務(wù)上需要一個(gè)能夠保證一致性的數(shù)據(jù)存儲(chǔ)(這也是Facebook并沒有采用Cassandra的原因之一)。HBase還具有良好的隨機(jī)讀性能。消息系統(tǒng)的業(yè)務(wù)邏輯導(dǎo)致會(huì)有很多穿透緩存層的隨機(jī)讀操作。
由于數(shù)據(jù)量大,分布的機(jī)器也可能很多,出故障或者進(jìn)行一些日常升級(jí)工作會(huì)比較頻繁。所以高可用性和故障可恢復(fù)性也顯得極其重要。錯(cuò)誤隔離性是指一個(gè)結(jié)點(diǎn)的錯(cuò)誤不會(huì)影響到其它結(jié)點(diǎn),磁盤故障只會(huì)對(duì)相應(yīng)的小規(guī)模的數(shù)據(jù)產(chǎn)生影響。同時(shí)提供原子性的read-modify-write操作。原子性的increment或者對(duì)比后修改的操作,對(duì)很多業(yè)務(wù)上的處理非常方便。最后提供獲取某個(gè)范圍的數(shù)據(jù)的功能。比如像獲取某人最近100條消息這樣的功能,在消息系統(tǒng)里也是很常見的需求。
當(dāng)然,下面幾個(gè)Hadoop和HBase不太擅長(zhǎng)的方面也值得一說。首先是同一個(gè)數(shù)據(jù)中心網(wǎng)絡(luò)割裂下的容災(zāi)性。同一個(gè)數(shù)據(jù)中心的網(wǎng)絡(luò)出現(xiàn)問題了,導(dǎo)致各結(jié)點(diǎn)之間無法正常溝通,這種情況通常可以通過配置一些備用的網(wǎng)絡(luò)設(shè)備來避免。其次某個(gè)數(shù)據(jù)中心故障不會(huì)影響服務(wù)。這個(gè)情況更是少之又少。最后在多個(gè)數(shù)據(jù)中心間的實(shí)時(shí)數(shù)據(jù)交換。這個(gè)不太現(xiàn)實(shí),通常這一點(diǎn)是用Cache層來實(shí)現(xiàn)用戶對(duì)無端數(shù)據(jù)的實(shí)時(shí)訪問的。
杭州網(wǎng)站建設(shè) 杭州網(wǎng)站設(shè)計(jì) 杭州網(wǎng)站制作 杭州精典網(wǎng)站設(shè)計(jì)公司
-
杭州網(wǎng)站設(shè)計(jì)公司解析:企業(yè)網(wǎng)站建設(shè)的完整流程
日期:2025-07-25瀏覽次數(shù):3119次
-
杭州企業(yè)網(wǎng)站建設(shè):塑造獨(dú)特視覺效果,契合企業(yè)文化和營(yíng)銷目標(biāo)
日期:2025-07-25瀏覽次數(shù):3094次
-
杭州網(wǎng)站建設(shè):定制網(wǎng)站如何兼顧美觀與實(shí)用?
日期:2025-07-25瀏覽次數(shù):3103次
-
杭州定制高端網(wǎng)站:精心挑選主題,鑄就卓越品質(zhì)
日期:2025-07-08瀏覽次數(shù):3118次
-
杭州定制網(wǎng)站之 Wap 網(wǎng)站建設(shè)要點(diǎn)解析
日期:2025-07-08瀏覽次數(shù):3106次
相關(guān)新聞
整合同類新聞,相關(guān)新聞一手掌握
-
三亞新網(wǎng)站如何提高百度收錄
日期:2023-02-14瀏覽次數(shù):6735次
-
三亞網(wǎng)站建設(shè):針對(duì)百度優(yōu)化關(guān)鍵詞的4個(gè)步驟
日期:2023-02-14瀏覽次數(shù):7051次
-
做三亞app開發(fā),這些問題常遇到
日期:2021-02-25瀏覽次數(shù):7399次
-
三亞app開發(fā),如何開發(fā)高質(zhì)量的app
日期:2021-02-25瀏覽次數(shù):7442次
-
三亞網(wǎng)站制作之網(wǎng)站的介紹和宣傳
日期:2020-10-14瀏覽次數(shù):7324次
最新新聞
與互聯(lián)網(wǎng)同行,實(shí)時(shí)掌握網(wǎng)建行業(yè)最新動(dòng)態(tài)
-
網(wǎng)頁制作需要什么
日期:2019-08-01瀏覽次數(shù):10572次
-
杭州小程序定制:直播+小程序,開啟快速變現(xiàn)之路
日期:2020-08-27瀏覽次數(shù):11853次
-
對(duì)于連云港定制app,你是否有這些疑惑?
日期:2020-10-29瀏覽次數(shù):6991次
-
杭州APP開發(fā):自主學(xué)習(xí)App開發(fā)是否值得
日期:2021-01-26瀏覽次數(shù):9631次
-
如何設(shè)置網(wǎng)站建設(shè)LOGO
日期:2021-06-15瀏覽次數(shù):9496次
隨機(jī)新聞
新聞新動(dòng)態(tài),您需要的新聞管家
洞悉市場(chǎng)趨勢(shì)演變讓傳播回歸社會(huì)
免費(fèi)獲取網(wǎng)站建設(shè)與網(wǎng)絡(luò)推廣方案報(bào)價(jià)
-
關(guān)于我們
杭州帷拓科技有限公司,是一家新型的全案網(wǎng)絡(luò)開發(fā)公司,作為以互聯(lián)網(wǎng)高端網(wǎng)站建設(shè)、APP開發(fā)、小程序開發(fā)為核心的專業(yè)網(wǎng)絡(luò)技術(shù)服務(wù)供應(yīng)商,帷拓科技致力于全面分析市場(chǎng)環(huán)境、衡量與預(yù)測(cè)市場(chǎng)需求、整合區(qū)別于行業(yè)競(jìng)爭(zhēng)對(duì)手的絕對(duì)優(yōu)勢(shì),結(jié)合品牌理念深度挖掘項(xiàng)目?jī)?yōu)勢(shì)和產(chǎn)品價(jià)值,提升客戶品牌認(rèn)知、認(rèn)可度。
-
我們的客戶
帷拓科技?xì)v經(jīng)十年沉淀,與國(guó)內(nèi)外上千家客戶達(dá)成合作關(guān)系,其中穩(wěn)定合作的公司有:浙江華為、浙江移動(dòng)、浙江5G產(chǎn)業(yè)聯(lián)盟、浙江省社科院、綠城足球俱樂部、娃哈哈雙語學(xué)校、健康中國(guó)杭州峰會(huì)、科雷機(jī)電等,帷拓科技始終堅(jiān)持“帷有專業(yè),才能拓展無限”的服務(wù)理念,堅(jiān)持“認(rèn)真堅(jiān)持細(xì)節(jié)”的優(yōu)質(zhì)服務(wù)理念,不斷完善自身,成就企業(yè),最終實(shí)現(xiàn)共贏。
-
我們的業(yè)務(wù)
帷拓科技主營(yíng)業(yè)務(wù)范圍包含互聯(lián)網(wǎng)高端網(wǎng)站建設(shè)、APP開發(fā)、小程序開發(fā)、商城網(wǎng)站建設(shè)、公眾號(hào)運(yùn)營(yíng)以及數(shù)字營(yíng)銷等,涵蓋了服務(wù)、房產(chǎn)、數(shù)碼、服裝、物流貿(mào)易等行業(yè),根據(jù)品牌現(xiàn)狀,為每個(gè)客戶量身定制項(xiàng)目整體服務(wù)方案,以敏銳的市場(chǎng)洞察力、創(chuàng)新的市場(chǎng)策劃能力,全面把握市場(chǎng)變化,為客戶實(shí)現(xiàn)從企業(yè)到消費(fèi)者的價(jià)值轉(zhuǎn)換。