云計(jì)算為何需要一個(gè)完全不同的數(shù)據(jù)中心


時(shí)間:2013-11-27






  亞馬遜的簡(jiǎn)單存儲(chǔ)服務(wù)(S3)存儲(chǔ)著超過(guò)一萬(wàn)億文件,每秒處理150萬(wàn)個(gè)請(qǐng)求。DynamoDB(AWS NoSQL數(shù)據(jù)庫(kù))推出不到一年,10月已經(jīng)擁有超過(guò)2萬(wàn)億的輸入或輸出請(qǐng)求。

  這種規(guī)模提供所有的這些服務(wù)需要大量的硬件,云計(jì)算部署正在快速增長(zhǎng),這意味著亞馬遜需要不斷增加更多硬件到其數(shù)據(jù)中心。

  那么亞馬遜是如何做到這一點(diǎn)的呢?在背后指揮戰(zhàn)略的副總裁兼杰出工程師James Hamilton在該公司的re:Invent用戶大會(huì)上分享了他的想法,其想法可以簡(jiǎn)單概括為“規(guī)模是一切工作的推動(dòng)者”。

  規(guī)模在很多方面促進(jìn)著該公司的發(fā)展。其一,當(dāng)一家公司多次做某件事情是,就會(huì)變得非常擅長(zhǎng)此事。因此,亞馬遜配置的服務(wù)器越多,他們就能更好地從中總結(jié)最佳做法。數(shù)據(jù)中心同樣也是這個(gè)道理。該公司正在迅速地增加大量的容量,讓AWS工程師可以快速地測(cè)試其想法,從而找出什么是可行的,什么是不可行的。

  AWS已經(jīng)為其具體用例優(yōu)化了其硬件。AWS已經(jīng)建立了自定義計(jì)算、存儲(chǔ)和網(wǎng)絡(luò)服務(wù)器,這些服務(wù)器允許該公司精確到粒度水平。其存儲(chǔ)服務(wù)器比市場(chǎng)上的任何服務(wù)器都更加密集,每臺(tái)服務(wù)器重量超過(guò)一噸多。最近,AWS定制了其網(wǎng)絡(luò)設(shè)備來(lái)創(chuàng)建路由器和協(xié)議棧,以配置高性能工作負(fù)載。Hamilton表示,這些投資將會(huì)推動(dòng)新的基于網(wǎng)絡(luò)的產(chǎn)品和服務(wù),這些將會(huì)在未來(lái)一年推出。創(chuàng)建定制硬件的想法并不是行業(yè)中的獨(dú)樹(shù)一幟,F(xiàn)acebook也已經(jīng)創(chuàng)建了一個(gè)完整的開(kāi)源項(xiàng)目—開(kāi)放計(jì)算項(xiàng)目。

  AWS甚至定制化了其功率消耗程序。該公司已經(jīng)與供應(yīng)商簽訂了批量電力購(gòu)買(mǎi)協(xié)議,為其跨越全球就各地區(qū)的幾十個(gè)數(shù)據(jù)中心獲得所需的電源。在美國(guó)東部地區(qū),該公司有超過(guò)十個(gè)數(shù)據(jù)中心,這也是該公司最大的電耗區(qū)域。AWS不僅為這些地區(qū)批量購(gòu)買(mǎi)電源,該公司還有自己的子站,在電源發(fā)送到數(shù)據(jù)中心之前存儲(chǔ)電源。這讓該公司能夠盡可能多地?cái)U(kuò)展其產(chǎn)品,而不需要擔(dān)心電源成為限制因素。

  AWS表示,一個(gè)大的目標(biāo)是對(duì)客戶做出響應(yīng)。該公司最近在美國(guó)西部俄勒岡州建立了一個(gè)新的數(shù)據(jù)中心,這是100%碳中和數(shù)據(jù)中心,也是該公司增長(zhǎng)速度最快的數(shù)據(jù)中心。

  即使有所有這些定制化設(shè)備,AWS總是不能準(zhǔn)確地預(yù)測(cè)其將要使用的資源量。如果AWS可以提高其利用率,其成本將會(huì)更低,因?yàn)樗麄兙湍軌驈挠布泄?jié)省更多成本。AWS必須部署足夠的容量來(lái)支持其峰值利用率,但如果服務(wù)器沒(méi)有得到完全地利用,這又是一種容量浪費(fèi)。AWS通過(guò)匯集不同的客戶高峰工作負(fù)載來(lái)解決這個(gè)問(wèn)題。例如,零售商客戶可能會(huì)在節(jié)假日迎來(lái)購(gòu)物高峰期,而處理納稅申報(bào)的公司則會(huì)在另一個(gè)時(shí)期使用資源。通過(guò)結(jié)合這些客戶的工作負(fù)載情況,該公司就可以平均工作負(fù)載密度。

  當(dāng)然,仍然會(huì)存在利用率不高的情況,不過(guò),AWS一直在試圖將這個(gè)變成其優(yōu)勢(shì)。例如,該公司允許客戶出售其多余的實(shí)例,來(lái)提高利用率。

  該公司的規(guī)模正在不斷擴(kuò)大,正是該公司的規(guī)模推動(dòng)著這些效率的增長(zhǎng)。隨著亞馬遜的發(fā)展,AWS將會(huì)增加更多功能,吸引更多客戶,從而帶來(lái)更多的增長(zhǎng)。亞馬遜公司高管表示這是一個(gè)良性循環(huán)。

  云計(jì)算是一種新興的技術(shù),但亞馬遜云計(jì)算服務(wù)現(xiàn)在已經(jīng)是價(jià)值數(shù)十億美元的業(yè)務(wù),根據(jù)Gartner表示,其云計(jì)算是其14個(gè)最大競(jìng)爭(zhēng)對(duì)手總和的五倍多。亞馬遜的簡(jiǎn)單存儲(chǔ)服務(wù)(S3)存儲(chǔ)著超過(guò)一萬(wàn)億文件,每秒處理150萬(wàn)個(gè)請(qǐng)求。DynamoDB(AWS NoSQL數(shù)據(jù)庫(kù))推出不到一年,10月已經(jīng)擁有超過(guò)2萬(wàn)億的輸入或輸出請(qǐng)求。這種規(guī)模提供所有的這些服務(wù)需要大量的硬件,云計(jì)算部署正在快速增長(zhǎng),這意味著亞馬遜需要不斷增加更多硬件到其數(shù)據(jù)中心。那么亞馬遜是如何做到這一點(diǎn)的呢?在背后指揮戰(zhàn)略的副總裁兼杰出工程師James Hamilton在該公司的re:Invent用戶大會(huì)上分享了他的想法,其想法可以簡(jiǎn)單概括為“規(guī)模是一切工作的推動(dòng)者”。規(guī)模在很多方面促進(jìn)著該公司的發(fā)展。其一,當(dāng)一家公司多次做某件事情是,就會(huì)變得非常擅長(zhǎng)此事。因此,亞馬遜配置的服務(wù)器越多,他們就能更好地從中總結(jié)最佳做法。數(shù)據(jù)中心同樣也是這個(gè)道理。該公司正在迅速地增加大量的容量,讓AWS工程師可以快速地測(cè)試其想法,從而找出什么是可行的,什么是不可行的。AWS已經(jīng)為其具體用例優(yōu)化了其硬件。AWS已經(jīng)建立了自定義計(jì)算、存儲(chǔ)和網(wǎng)絡(luò)服務(wù)器,這些服務(wù)器允許該公司精確到粒度水平。其存儲(chǔ)服務(wù)器比市場(chǎng)上的任何服務(wù)器都更加密集,每臺(tái)服務(wù)器重量超過(guò)一噸多。最近,AWS定制了其網(wǎng)絡(luò)設(shè)備來(lái)創(chuàng)建路由器和協(xié)議棧,以配置高性能工作負(fù)載。Hamilton表示,這些投資將會(huì)推動(dòng)新的基于網(wǎng)絡(luò)的產(chǎn)品和服務(wù),這些將會(huì)在未來(lái)一年推出。創(chuàng)建定制硬件的想法并不是行業(yè)中的獨(dú)樹(shù)一幟,F(xiàn)acebook也已經(jīng)創(chuàng)建了一個(gè)完整的開(kāi)源項(xiàng)目—開(kāi)放計(jì)算項(xiàng)目。AWS甚至定制化了其功率消耗程序。該公司已經(jīng)與供應(yīng)商簽訂了批量電力購(gòu)買(mǎi)協(xié)議,為其跨越全球就各地區(qū)的幾十個(gè)數(shù)據(jù)中心獲得所需的電源。在美國(guó)東部地區(qū),該公司有超過(guò)十個(gè)數(shù)據(jù)中心,這也是該公司最大的電耗區(qū)域。AWS不僅為這些地區(qū)批量購(gòu)買(mǎi)電源,該公司還有自己的子站,在電源發(fā)送到數(shù)據(jù)中心之前存儲(chǔ)電源。這讓該公司能夠盡可能多地?cái)U(kuò)展其產(chǎn)品,而不需要擔(dān)心電源成為限制因素。AWS表示,一個(gè)大的目標(biāo)是對(duì)客戶做出響應(yīng)。該公司最近在美國(guó)西部俄勒岡州建立了一個(gè)新的數(shù)據(jù)中心,這是100%碳中和數(shù)據(jù)中心,也是該公司增長(zhǎng)速度最快的數(shù)據(jù)中心。即使有所有這些定制化設(shè)備,AWS總是不能準(zhǔn)確地預(yù)測(cè)其將要使用的資源量。如果AWS可以提高其利用率,其成本將會(huì)更低,因?yàn)樗麄兙湍軌驈挠布泄?jié)省更多成本。AWS必須部署足夠的容量來(lái)支持其峰值利用率,但如果服務(wù)器沒(méi)有得到完全地利用,這又是一種容量浪費(fèi)。AWS通過(guò)匯集不同的客戶高峰工作負(fù)載來(lái)解決這個(gè)問(wèn)題。例如,零售商客戶可能會(huì)在節(jié)假日迎來(lái)購(gòu)物高峰期,而處理納稅申報(bào)的公司則會(huì)在另一個(gè)時(shí)期使用資源。通過(guò)結(jié)合這些客戶的工作負(fù)載情況,該公司就可以平均工作負(fù)載密度。當(dāng)然,仍然會(huì)存在利用率不高的情況,不過(guò),AWS一直在試圖將這個(gè)變成其優(yōu)勢(shì)。例如,該公司允許客戶出售其多余的實(shí)例,來(lái)提高利用率。該公司的規(guī)模正在不斷擴(kuò)大,正是該公司的規(guī)模推動(dòng)著這些效率的增長(zhǎng)。隨著亞馬遜的發(fā)展,AWS將會(huì)增加更多功能,吸引更多客戶,從而帶來(lái)更多的增長(zhǎng)。亞馬遜公司高管表示這是一個(gè)良性循環(huán)。


來(lái)源:中國(guó)IDC圈



  版權(quán)及免責(zé)聲明:凡本網(wǎng)所屬版權(quán)作品,轉(zhuǎn)載時(shí)須獲得授權(quán)并注明來(lái)源“中國(guó)產(chǎn)業(yè)經(jīng)濟(jì)信息網(wǎng)”,違者本網(wǎng)將保留追究其相關(guān)法律責(zé)任的權(quán)力。凡轉(zhuǎn)載文章,不代表本網(wǎng)觀點(diǎn)和立場(chǎng)。版權(quán)事宜請(qǐng)聯(lián)系:010-65363056。

延伸閱讀

熱點(diǎn)視頻

第六屆中國(guó)報(bào)業(yè)黨建工作座談會(huì)(1) 第六屆中國(guó)報(bào)業(yè)黨建工作座談會(huì)(1)

熱點(diǎn)新聞

熱點(diǎn)輿情

特色小鎮(zhèn)

版權(quán)所有:中國(guó)產(chǎn)業(yè)經(jīng)濟(jì)信息網(wǎng)京ICP備11041399號(hào)-2京公網(wǎng)安備11010502003583