2018年底,百度宣布技術(shù)體系架構(gòu)整合ABC智能云事業(yè)部升級(jí)為智能云事業(yè)群組(ACG),同時(shí)承載人工智能toB業(yè)務(wù)和云業(yè)務(wù);搜索公司及各BG的運(yùn)維、基礎(chǔ)架構(gòu)和集團(tuán)級(jí)共享平臺(tái)整合至基礎(chǔ)技術(shù)體系(TG)。
百度創(chuàng)始人、董事長(zhǎng)李彥宏稱(chēng)此次組織架構(gòu)調(diào)整將強(qiáng)化集中資源“打大仗、打硬仗”的能力,幫助百度客戶(hù)完成智能化轉(zhuǎn)型、早日邁入AI時(shí)代?!鞍俣葘⒋蛟霢I時(shí)代最領(lǐng)先的技術(shù)平臺(tái),實(shí)現(xiàn)前端業(yè)務(wù)和技術(shù)平臺(tái)的資源高效統(tǒng)籌及組織全面協(xié)同?!?/span>
而數(shù)據(jù)中心作為上述一切業(yè)務(wù)的基礎(chǔ),是百度發(fā)力AI的根基。
目前,百度在陽(yáng)泉、順義、南京等地區(qū)都已部署數(shù)據(jù)中心。本周,鈦媒體探訪(fǎng)了百度陽(yáng)泉云計(jì)算中心,該中心是百度自建的第一個(gè)超大規(guī)模數(shù)據(jù)中心,也是亞洲規(guī)模最大的數(shù)據(jù)中心。
如圖所示,陽(yáng)泉云計(jì)算中心分為八個(gè)模組樓,而每一個(gè)區(qū)域則通過(guò)一條環(huán)狀長(zhǎng)廊連接在一起,在發(fā)生緊急狀況時(shí)工作人員能夠靈活調(diào)度。
就在剛剛過(guò)去的2019年春節(jié),百度抗住了春晚紅包互動(dòng)活動(dòng)的數(shù)據(jù)流沖擊,陽(yáng)泉云計(jì)算數(shù)據(jù)中心功不可沒(méi)。
“春晚的數(shù)據(jù)流可以用驚濤駭浪來(lái)形容。全球觀(guān)眾互動(dòng)次數(shù)達(dá)到208億次,春晚數(shù)據(jù)流量預(yù)計(jì)每秒峰值5000萬(wàn)次,每分鐘峰值10億次。”百度系統(tǒng)部總監(jiān)張炳華說(shuō)道。
靠近用戶(hù)的陽(yáng)泉云計(jì)算中心
目前,百度在陽(yáng)泉、順義、南京等多個(gè)地區(qū)都已部署數(shù)據(jù)中心。其中,陽(yáng)泉中心是百度自建的第一個(gè)超大規(guī)模數(shù)據(jù)中心,從2011年9月選址到2018年9月一期整體交付,歷時(shí)7年,直至今日,陽(yáng)泉云計(jì)算中心仍在不停的建設(shè)、擴(kuò)展中。
百度陽(yáng)泉云計(jì)算中心規(guī)劃建筑面積超過(guò)20萬(wàn)平米,按照T3+標(biāo)準(zhǔn)設(shè)計(jì),服務(wù)器裝機(jī)能力超過(guò)28萬(wàn)臺(tái)。一期已建成投產(chǎn)建筑面積約12萬(wàn)平方米,建設(shè)涵蓋8個(gè)高標(biāo)準(zhǔn)模組樓,機(jī)房滿(mǎn)載可提供約6000個(gè)40A機(jī)柜、承載16萬(wàn)多臺(tái)服務(wù)器。為百度智能云、百度App、百度地圖、智能城市、小度、Apollo等百度內(nèi)外部的產(chǎn)品和廠(chǎng)商提供強(qiáng)勁的計(jì)算能力。
選址
張炳華表示,百度在東、南、西北各大區(qū)都有數(shù)據(jù)中心選址布局,和大部分公司一樣,具體選到哪可能有各種因素考量,從技術(shù)上看,主要考察以下6個(gè)方面的因素,最后綜合平衡選擇。
第一,就是環(huán)境地理?xiàng)l件。遠(yuǎn)離地震、海嘯、臺(tái)風(fēng)等自然災(zāi)害地區(qū)的,除此之外,還要考慮氣候條件,氣候適宜有利于降低成本;第二,政策支持力度 ;第三,電力、水力的豐富度,豐富的電力和水源供應(yīng),是建設(shè)數(shù)據(jù)中心的必備條件;而且,電價(jià)也是要重點(diǎn)考量因素,電力成本占運(yùn)營(yíng)成本的60、70%;第四,網(wǎng)絡(luò)技術(shù)條件,地方很好,政策也好,網(wǎng)絡(luò)接入能力好不好,能不能接入運(yùn)營(yíng)商骨干網(wǎng),也是選址需要重點(diǎn)考慮的點(diǎn);第五,交通環(huán)境;第六,人才條件。而選擇在陽(yáng)泉,則是考慮百度的業(yè)務(wù)類(lèi)型,以及靠近用戶(hù),提升用戶(hù)體驗(yàn)。
據(jù)介紹,目前百度陽(yáng)泉云計(jì)算中心使用百度自主研發(fā)高性能交換機(jī),提供超大規(guī)模的網(wǎng)絡(luò)吞吐能力,支持10G、25G的通用計(jì)算網(wǎng)絡(luò)接入和100G的AI高速無(wú)損網(wǎng)絡(luò)互聯(lián)技術(shù)。
在數(shù)據(jù)中心外部,百度網(wǎng)絡(luò)構(gòu)建了三個(gè)時(shí)延圈:從數(shù)據(jù)中心覆蓋用戶(hù)時(shí)延不超過(guò)30ms,從POP點(diǎn)覆蓋用戶(hù)的時(shí)延不超過(guò)10ms,從CDN覆蓋用戶(hù)的時(shí)延不超過(guò)2ms,確保全國(guó)用戶(hù)的全面覆蓋和就近接入。在數(shù)據(jù)中心內(nèi)部,百度通過(guò)大帶寬、低時(shí)延、無(wú)損網(wǎng)絡(luò),把數(shù)據(jù)中心數(shù)十萬(wàn)臺(tái)服務(wù)器連接成為一個(gè)超級(jí)計(jì)算機(jī)。
優(yōu)化
數(shù)據(jù)中心建設(shè)周期長(zhǎng),在規(guī)劃過(guò)程中必須具備前瞻性。在這幾年陸續(xù)建設(shè)過(guò)程中,各種先進(jìn)技術(shù)都在逐漸被運(yùn)用到陽(yáng)泉云計(jì)算中心。其中,數(shù)據(jù)中心模塊化技術(shù)、整機(jī)柜服務(wù)器技術(shù)成為了數(shù)據(jù)中心國(guó)家技術(shù)標(biāo)準(zhǔn)。其他不斷成熟應(yīng)用的領(lǐng)先技術(shù)包括AHU風(fēng)扇墻、市電直供+HVDC、OCU等等。
目前,該中心已上線(xiàn)服務(wù)器超過(guò)15萬(wàn)臺(tái)、年均PUE低至1.09、超過(guò)300萬(wàn)個(gè)CPU核、存儲(chǔ)容量超過(guò)了6EB。
張炳華介紹到,PUE(Power Usage Effectiveness,電力使用效率),是國(guó)際上通行的衡量數(shù)據(jù)中心能源效率的指標(biāo),PUE值是指數(shù)據(jù)中心總能耗(供電、制冷、照明、IT)與IT能耗之比。PUE值越接近于1,表示效率越高。
“數(shù)據(jù)中心成本中,電力成本占了60%-70%,降低PUE,可以直接降低數(shù)據(jù)中心的運(yùn)營(yíng)成本,提高產(chǎn)品的競(jìng)爭(zhēng)能力。通過(guò)技術(shù)創(chuàng)新,提高數(shù)據(jù)中心能效,對(duì)行業(yè)有極大的示范作用和帶動(dòng)作用,同時(shí),可以減少能源消耗,減少CO2排放?!?/span>
百度陽(yáng)泉云計(jì)算中心監(jiān)控中心,如屏幕所示,實(shí)際當(dāng)天的PUE為1.06,還要低于1.09這一數(shù)值。
除了PUE以外,數(shù)據(jù)中心的機(jī)架規(guī)模、功率密度、運(yùn)行穩(wěn)定性、運(yùn)營(yíng)成本等,都是數(shù)據(jù)中心的核心指標(biāo)。
對(duì)標(biāo)國(guó)際巨頭,百度陽(yáng)泉云計(jì)算中心數(shù)據(jù)中心單體規(guī)模、算力、存儲(chǔ)容量方面上非常強(qiáng)大,比如:采用“天蝎”整機(jī)柜服務(wù)器、“冰山”冷存儲(chǔ)系統(tǒng)、“X-MAN”AI超級(jí)計(jì)算平臺(tái)等;在數(shù)據(jù)中心基礎(chǔ)設(shè)施架構(gòu)非常領(lǐng)先,比如:高效供電、免費(fèi)冷卻、智能控制,并與服務(wù)器、網(wǎng)絡(luò)設(shè)備間的協(xié)同創(chuàng)新,達(dá)到最佳匹配效果。
安全
業(yè)務(wù)安全及用戶(hù)體驗(yàn)對(duì)于任何一個(gè)數(shù)據(jù)中心來(lái)說(shuō)都是至關(guān)緊要的。百度智能云產(chǎn)業(yè)智能化業(yè)務(wù)負(fù)責(zé)人李碩介紹到,百度采用分層機(jī)制,基本能夠做到N+1的服務(wù)模式,即一個(gè)用戶(hù)可以通過(guò)多個(gè)入口來(lái)訪(fǎng)問(wèn)百度的服務(wù),若訪(fǎng)問(wèn)數(shù)據(jù)時(shí)物理服務(wù)器出現(xiàn)故障,會(huì)通過(guò)智慧調(diào)度系統(tǒng)實(shí)現(xiàn)分層處理。
“對(duì)于相對(duì)比較冷的數(shù)據(jù),比如陽(yáng)泉和青島各有備份,在網(wǎng)盤(pán)中就不會(huì)有對(duì)應(yīng)的數(shù)據(jù),但即使該數(shù)據(jù)在10年內(nèi)沒(méi)有被用到,我們當(dāng)前在使用時(shí)也能很快訪(fǎng)問(wèn)到,這個(gè)是和底層完全剝離的。如果是非?;鸬臄?shù)據(jù),會(huì)在多個(gè)系統(tǒng)中增加備份,這樣南方的用戶(hù)可以在廣州訪(fǎng)問(wèn),北方的用戶(hù)可以在陽(yáng)泉或青島訪(fǎng)問(wèn)。”
李碩表示:“隨機(jī)關(guān)掉百度的任何一個(gè)數(shù)據(jù)中心,我們?cè)L問(wèn)依舊沒(méi)有任何問(wèn)題,到今天為止依然是這樣,這是上層服務(wù)設(shè)計(jì)需要做到的?!?/span>
在管理上,陽(yáng)泉數(shù)據(jù)中心與北京總部實(shí)時(shí)聯(lián)動(dòng)。陽(yáng)泉數(shù)據(jù)中心團(tuán)隊(duì)主要負(fù)責(zé)數(shù)據(jù)中心7*24時(shí)值班,負(fù)責(zé)現(xiàn)場(chǎng)運(yùn)營(yíng)管理、故障處理和維護(hù)保養(yǎng),業(yè)務(wù)層面的部署和調(diào)度由總部統(tǒng)一調(diào)度。
為百度AI提供超強(qiáng)算力
2018年底,百度剛剛發(fā)布自主研發(fā)的超級(jí)AI計(jì)算平臺(tái)X-MAN3.0。該平臺(tái)專(zhuān)為AI深度學(xué)習(xí)場(chǎng)景優(yōu)化設(shè)計(jì),每秒完成2000萬(wàn)億次深度神經(jīng)網(wǎng)絡(luò)計(jì)算,極大的加快了AI深度學(xué)習(xí)模型的訓(xùn)練速度。
就在陽(yáng)泉云計(jì)算中心,鈦媒體看到了“傳說(shuō)中”的AI計(jì)算集群?!袄浒迨揭豪浼夹g(shù)已經(jīng)在百度X-MAN 2.0上規(guī)模應(yīng)用了。”據(jù)張炳華介紹,2017年上線(xiàn)的X-MAN 2.0,是國(guó)內(nèi)首個(gè)采用液體冷卻技術(shù)的GPU解決方案,實(shí)現(xiàn)了超高的散熱效率,規(guī)模應(yīng)用后,可以去除制冷機(jī)組,全面實(shí)現(xiàn)無(wú)冷機(jī)運(yùn)行。
目前,陽(yáng)泉云計(jì)算中心是由CPU通用計(jì)算+GPU異構(gòu)計(jì)算+XPU新一代AI處理架構(gòu)所組成的強(qiáng)大算力平臺(tái)。不僅僅是百度搜索、度秘、智能云、基礎(chǔ)技術(shù)、新興業(yè)務(wù)的基礎(chǔ),更是百度發(fā)力人工智能、自動(dòng)駕駛、AI的重要基石。
張炳華對(duì)鈦媒體說(shuō)道,這些算力平臺(tái)定義了AI時(shí)代的基礎(chǔ)設(shè)施標(biāo)準(zhǔn),并為百度AI技術(shù)多年積累和業(yè)務(wù)實(shí)踐的集大成——百度大腦提供了強(qiáng)大的算力平臺(tái)。而算力平臺(tái)之上的百度大腦,則為百度的AI業(yè)務(wù)提供了強(qiáng)有力的算法和數(shù)據(jù)支持。
“我們都希望通過(guò)開(kāi)源和開(kāi)放,把中國(guó)的數(shù)據(jù)中心產(chǎn)業(yè)生態(tài)做好,縮小與國(guó)際先進(jìn)水平的差距,大家一起想辦法把蛋糕做大,把規(guī)模效益做起來(lái),這樣的話(huà),每個(gè)參與者都是受益者。ODCC每年發(fā)布的幾十項(xiàng)成果,這些成果都是由各個(gè)會(huì)員單位貢獻(xiàn)的,這些個(gè)成果都是開(kāi)放的。隨著這個(gè)生態(tài)的規(guī)模越來(lái)越大,產(chǎn)業(yè)鏈越來(lái)越成熟,也越來(lái)越得到行業(yè)的認(rèn)可?!?/span>
上一篇:市場(chǎng)規(guī)模達(dá)千億 閑魚(yú)計(jì)劃三年培育10萬(wàn)玩家
聲明:本站部分信息來(lái)自互聯(lián)網(wǎng),轉(zhuǎn)載的目的在于傳遞更多信息及用于網(wǎng)絡(luò)分享,并不代表本站贊同其觀(guān)點(diǎn)和對(duì)其真實(shí)性負(fù)責(zé),也不構(gòu)成任何其他建議。如果您發(fā)現(xiàn)網(wǎng)站上有侵犯您的知識(shí)產(chǎn)權(quán)的作品,請(qǐng)與我們?nèi)〉寐?lián)系,我們會(huì)及時(shí)修改或刪除