
17萬(wàn)臺(tái)服務(wù)器支撐起來(lái)的業(yè)務(wù)平臺(tái)
Criteo網(wǎng)絡(luò)的運(yùn)營(yíng)核心是世界上最大的私有Hadoop平臺(tái)。這個(gè)開(kāi)源軟件框架負(fù)責(zé)存儲(chǔ)“大數(shù)據(jù)”,在商用硬件集群上運(yùn)行應(yīng)用程序,支持所有類(lèi)型數(shù)據(jù)的海量存儲(chǔ),具有強(qiáng)大的處理能力,理論上可以處理幾乎無(wú)限數(shù)量的并發(fā)任務(wù)和作業(yè)。在Criteo,該平臺(tái)每天處理的工作多達(dá)85000項(xiàng),這是一項(xiàng)由近17萬(wàn)臺(tái)服務(wù)器支持起來(lái)的數(shù)據(jù)密集型業(yè)務(wù)。
隨著在線(xiàn)零售業(yè)的不斷普及,客戶(hù)對(duì)Criteo解決方案的需求量大幅增長(zhǎng),需要處理的數(shù)據(jù)也不斷增加。2015年1月,Criteo開(kāi)始考慮構(gòu)建一個(gè)新的Hadoop集群。Criteo基礎(chǔ)設(shè)施業(yè)務(wù)工程總監(jiān)Matthieu Blumberg解釋說(shuō):“我們通過(guò)大數(shù)據(jù)發(fā)現(xiàn),當(dāng)我們擁有的數(shù)據(jù)越多時(shí),想要的也就越多,需要的也就越多。對(duì)我們來(lái)說(shuō),這意味著我們現(xiàn)有的Hadoop集群相對(duì)于現(xiàn)有的需求來(lái)說(shuō)已經(jīng)太小了,所以我們決定建立一個(gè)新的集群。這使得我們有機(jī)會(huì)挑戰(zhàn)整個(gè)基礎(chǔ)架構(gòu)堆棧領(lǐng)域,并了解其他硬件供應(yīng)商。”
FusionServer:超過(guò)客戶(hù)預(yù)期的解決方案
Criteo將請(qǐng)求提案(RFP)發(fā)送給6家公司,其中包括了華為和Criteo目前的供應(yīng)商。根據(jù)這些公司的回復(fù)情況,Criteo選擇了3個(gè)候選解決方案進(jìn)入名單。華為就是在這個(gè)時(shí)候開(kāi)始引起Criteo注意的。
Matthieu Blumberg繼續(xù)說(shuō):“華為對(duì)RFP的回應(yīng)令我們印象深刻。華為顯然事先做了足夠的功課,他們已經(jīng)深入了解了我們用Hadoop所做的工作。他們給出的解決方案緊密貼合我們的業(yè)務(wù),而且還針對(duì)服務(wù)器的電源提供了替代方案,這清楚地表明他們完全了解Hadoop集群是如何運(yùn)行的。”
華為提供的解決方案基于新一代2U雙插槽機(jī)架式服務(wù)器FusionServer開(kāi)發(fā)完成,該解決方案提供靈活的資源擴(kuò)展能力以及強(qiáng)大的計(jì)算性能,是互聯(lián)網(wǎng)、大數(shù)據(jù)、云計(jì)算和關(guān)鍵企業(yè)應(yīng)用的理想選擇。
在評(píng)估過(guò)程中,Criteo從3家供應(yīng)商中分別購(gòu)買(mǎi)了10臺(tái)服務(wù)器,并在每組中建立了一個(gè)小型Hadoop集群進(jìn)行性能對(duì)比。這個(gè)標(biāo)桿活動(dòng)評(píng)估了設(shè)備性能、Linux功能、電源使用和驅(qū)動(dòng)程序支持。最后華為得分超過(guò)其他供應(yīng)商,因此Criteo選擇了華為。
Matthieu Blumberg補(bǔ)充說(shuō):“FusionServer超過(guò)了我們?cè)O(shè)定的所有標(biāo)準(zhǔn)。但是真正令我們印象深刻的是華為愿意幫助我們,愿意回答我們的問(wèn)題。例如,我們想要深入檢查系統(tǒng)的硬盤(pán),其他供應(yīng)商不準(zhǔn)備讓我們這么干,但是華為給我們提供了支持。短短幾天之內(nèi),華為就向我們提供了檢測(cè)所需要的工具。”
Criteo:以合適的價(jià)格為客戶(hù)提供服務(wù)
與競(jìng)爭(zhēng)對(duì)手的產(chǎn)品相比較,F(xiàn)usionServer提供了最高的硬盤(pán)驅(qū)動(dòng)器密度,每臺(tái)服務(wù)器支持16塊硬盤(pán),比最接近的對(duì)手多一塊,其功耗卻比競(jìng)爭(zhēng)對(duì)手低20%,優(yōu)勢(shì)明顯。關(guān)鍵的是Criteo現(xiàn)在可以用合適的價(jià)格提供客戶(hù)所需要的所有服務(wù)。
“經(jīng)過(guò)幾個(gè)月的使用和評(píng)估,我們決定將華為的FusionServer納入我們的全球采購(gòu)目錄,讓華為成為我們的一個(gè)主要硬件供應(yīng)商。所以自2016年初以來(lái),我們?cè)诿绹?guó)、歐洲和亞太地區(qū)持續(xù)采購(gòu)華為服務(wù)器。”Matthieu Blumberg說(shuō)。
展望未來(lái),Criteo認(rèn)為,現(xiàn)代化數(shù)據(jù)中心運(yùn)行需要許多設(shè)備的支持,而華為已經(jīng)被Criteo視作一個(gè)潛在主要供應(yīng)商。Criteo已經(jīng)購(gòu)買(mǎi)了更多的網(wǎng)絡(luò)設(shè)備,Matthieu Blumberg總結(jié)說(shuō):“華為提供構(gòu)建強(qiáng)大數(shù)據(jù)中心所需的全系列產(chǎn)品。我們可以從一個(gè)供應(yīng)商處購(gòu)買(mǎi)到模塊化集裝箱、服務(wù)器和網(wǎng)絡(luò)交換機(jī),這一點(diǎn)對(duì)我們來(lái)說(shuō)非常有吸引力。”
客戶(hù)證言
“華為顯然事先做了足夠的功課,他們已經(jīng)深入了解了我們用Hadoop所做的工作,給出的解決方案緊密貼合我們的業(yè)務(wù),而且還針對(duì)服務(wù)器的電源提供了替代方案,這清楚地表明他們完全了解Hadoop集群是如何運(yùn)行的。華為提供構(gòu)建強(qiáng)大數(shù)據(jù)中心所需的全系列產(chǎn)品。我們可以從一個(gè)供應(yīng)商處購(gòu)買(mǎi)到模塊化集裝箱、服務(wù)器和網(wǎng)絡(luò)交換機(jī),這一點(diǎn)對(duì)我們來(lái)說(shuō)非常有吸引力。”
——Criteo基礎(chǔ)設(shè)施業(yè)務(wù)工程總監(jiān)Matthieu Blumberg