百度:面對海量數(shù)據(jù)的綠巨人

 作者:阮曉東    40

  自行設(shè)計,打造綠色之路


  目前,百度已經(jīng)在多個領(lǐng)域展開了基于公共數(shù)據(jù)的搜索服務(wù)。2013年2月,國家藥監(jiān)局三大數(shù)據(jù)庫向百度開放,包括具有18萬余種國產(chǎn)和進口藥品信息的藥品數(shù)據(jù)庫,6000余種非處方藥(OTC)化學(xué)藥品說明書范本及中藥說明書范本的藥品說明書范本數(shù)據(jù)庫,以及經(jīng)過認(rèn)證的可向個人售藥的網(wǎng)站的數(shù)據(jù)庫信息。


  2013年4月末,百度知道推出了知識搜索服務(wù),針對相關(guān)領(lǐng)域的關(guān)鍵詞檢索提供滿足用戶需求的特型展示,目前已上線的有口碑搜索、醫(yī)療搜索、答案聚合及數(shù)據(jù)圖譜等功能,并同時覆蓋到PC端與無線端。


  在百度已相繼引入國家藥監(jiān)局、中國家電維修協(xié)會、中國航空協(xié)會、中國銀行業(yè)協(xié)會、北京市衛(wèi)生局等權(quán)威機構(gòu)的核心數(shù)據(jù)后,2013年5月,全國組織機構(gòu)代碼管理中心又和百度公司達成戰(zhàn)略合作,以便為社會提供安全、準(zhǔn)確的搜索結(jié)果。網(wǎng)友在百度搜索“組織機構(gòu)代碼查詢”可以進入專業(yè)核查工具,只要輸入組織機構(gòu)名稱、代碼、登記證號中的任意一項,就可以了解機構(gòu)類型、地址、有效期、頒發(fā)單位等重要信息,迅速判斷這家組織機構(gòu)是否真實、可靠。


  那么,這些海量的數(shù)據(jù),在云時代的背景下,百度如何通過有效的組織管理以及在設(shè)計理念上來實現(xiàn)幾十座數(shù)據(jù)中心的節(jié)能呢?在走訪中記者逐漸了解到,百度除了采用一系列節(jié)能的方法和技術(shù),比如優(yōu)化電源結(jié)構(gòu)、引入變頻技術(shù),優(yōu)化服務(wù)器的氣流式冷水機組及使用CFD軟件等方式來實現(xiàn)服務(wù)器技術(shù)的優(yōu)化外,更通過一系列定制化、高效的部件方面的自我的創(chuàng)新來建立中國最節(jié)能高效的云計算數(shù)據(jù)中心。


  自建綠色高效數(shù)據(jù)中心


  “數(shù)據(jù)中心是百度業(yè)務(wù)的載體,它支撐著海量數(shù)據(jù)存儲、云平臺和搜索社區(qū)等,所以百度更加關(guān)注建設(shè)云數(shù)據(jù)中心,用云的核心驅(qū)動力來支撐業(yè)務(wù)規(guī)模發(fā)展。”百度公司技術(shù)委員會理事長陳尚義介紹說,“百度的單體十萬臺服務(wù)器的數(shù)據(jù)中心,PUE每降低0.1,一年就可為百度節(jié)省上千萬的成本,所以,打造自我的綠色高效數(shù)據(jù)中心,在大數(shù)據(jù)時代將能很好應(yīng)對節(jié)能環(huán)保、低碳的要求。”


  目前,面對海量的大數(shù)據(jù),百度正在通過自建數(shù)據(jù)中心,開發(fā)了自己的大數(shù)據(jù)存儲系統(tǒng),并使用了多項新技術(shù)。目前,計劃投資47.08億元的百度云計算(陽泉)中心已于2012年8月奠基,該項目預(yù)計2015年完工。建成后的百度云計算(陽泉)中心數(shù)據(jù)存儲量將超過4000PB,可存儲的信息量相當(dāng)于20多萬個中國國家圖書館的藏書總量。2013年4月15日,成都市高新區(qū)與百度云簽署協(xié)議,中國最大的云開發(fā)服務(wù)平臺——“成都百度云開發(fā)者技術(shù)中心”正式入駐成都高新區(qū)移動互聯(lián)網(wǎng)大廈。此外,南京、廣州、天津的百度云數(shù)據(jù)中心也都在建設(shè)之中。


  陳尚義介紹說,百度數(shù)據(jù)中心從設(shè)計之初就開始體現(xiàn)綠色節(jié)能的理念。在解決設(shè)備散熱問題中,百度數(shù)據(jù)中心采用集中散熱、集中供電、高效部件等方法來降低能耗;在解決服務(wù)器能耗問題中,采用SSD解決服務(wù)器的瓶頸,降低服務(wù)器數(shù)量等方式來節(jié)約服務(wù)器耗電量。此外,一些數(shù)據(jù)中心采取白天以商業(yè)業(yè)務(wù)為主、數(shù)據(jù)處理為輔,夜晚側(cè)重數(shù)據(jù)處理為主的原則,來很好分配大數(shù)據(jù)量的工作時間,進而實現(xiàn)了節(jié)能高效。


  除了這些技術(shù),百度最讓人嘆服的還有數(shù)量眾多的“看家本領(lǐng)”,更顯示其“自制”的能力。


  能力1:自制固態(tài)硬盤(SSD)。據(jù)估計,百度的數(shù)據(jù)中心存儲了數(shù)百PB的數(shù)據(jù),其日常的數(shù)據(jù)處理能力達到數(shù)十個PB。為了解決海量數(shù)據(jù)實時存儲的巨大挑戰(zhàn),百度自行開發(fā)了SSD產(chǎn)品,其研發(fā)的SSD的性能比SATA SSD要好六倍,而且其成本只是它的10%。在南京的云計算數(shù)據(jù)中心也進行了大規(guī)模的行業(yè)內(nèi)的固態(tài)硬盤(SSD)部署。


  能力2:自行設(shè)計10Gb TOR交換機。百度自2011年開始研究和開發(fā)TOR交換機的設(shè)計,并于2012年推出第一代10Gb的TOR交換機。通過使用自行設(shè)計的硬件和軟件,設(shè)計制造模塊,以及DAC(直接連接電纜),百度的10Gb TOR的成本只相當(dāng)于同樣的1GB TOR商業(yè)交換機。目前百度的10Gb TOR交換機能承載超過5000臺的服務(wù)器,部署在其云計算數(shù)據(jù)中心里。


  能力3:定制機架服務(wù)器。百度正在與Facebook合作,促進和優(yōu)化開源的機架服務(wù)器的探索,這也是中國自主設(shè)計機架服務(wù)器的開源項目。定制的機架式服務(wù)器解決了百度許多問題,如傳統(tǒng)的主機托管數(shù)據(jù)中心空間和功率密度的限制,電纜的混亂和部署的效率低下,有助于提高智能化管理和資產(chǎn)精度。在南京的云計算數(shù)據(jù)中心,百度大規(guī)模部署了ARM服務(wù)器。據(jù)百度說,基于ARM的服務(wù)器使數(shù)據(jù)中心的總擁有成本(TCO)降低了25%,提高存儲密度70%。百度已經(jīng)獲得開發(fā)基于ARM的服務(wù)器的10項專利。ARM服務(wù)器的應(yīng)用,使南京的云計算數(shù)據(jù)中心能夠降低服務(wù)器總體擁有成本的10%,業(yè)務(wù)高峰時運轉(zhuǎn)效率提高近10倍。


  如今,百度已經(jīng)成為中國最具價值的品牌之一,英國《金融時報》將百度列為“中國十大世界級品牌”。目前百度已經(jīng)面向開發(fā)者全面開放了包括云存儲、大數(shù)據(jù)智能和云計算在內(nèi)的核心云能力,為開發(fā)者提供強大的技術(shù)運營支持與推廣變現(xiàn)保障。作為互聯(lián)網(wǎng)搜索的入口,百度承載著數(shù)億網(wǎng)民檢索需求,滿足海量計算的數(shù)據(jù)中心規(guī)模將日益龐大。百度從軟件架構(gòu)、IT設(shè)備、數(shù)據(jù)管理效率等多方面入手,致力于綠色IT建設(shè),將對產(chǎn)業(yè)鏈上下游的參與起到良好的示范和帶動作用。

阮曉東
 百度,面對,海量,數(shù)據(jù),巨人

擴展閱讀

系列專題:2009中國營銷  在即將過去的2008年,通脹壓力下的成本上升、人民幣升值、政策調(diào)整使得以生產(chǎn)為導(dǎo)向的中小型企業(yè)面臨越來越多的生存壓力。白酒業(yè),自然在其影響的行業(yè)之一?! τ谌珖拙?/p>

  作者:劉濤詳情


前言:現(xiàn)代醫(yī)療市場競爭激烈,民營醫(yī)院市場更是不容樂觀,民營醫(yī)院要想在競爭中取得優(yōu)勢,必須面向市場,積極開展市場營銷,從等市場到主動找市場,了解社會需求,采取有效的營銷策略,提高醫(yī)院的社會美譽度,擴大醫(yī)

  作者:胡一夫詳情


  江浙地區(qū)一批“小巨人”近年遭遇的成長乏力和重重困境正引起廣泛關(guān)注。這些“小巨人”大體包括兩種類型:一種是“小的多元化企業(yè)”,進入產(chǎn)業(yè)五花八門,在某一區(qū)域內(nèi)農(nóng)工商貿(mào)無所不涉,核心主業(yè)卻難尋其跡。一種

  作者:郭劍詳情


 由“巨”到“強”的轉(zhuǎn)型,是中小企業(yè)成長過程中脫胎換骨的鳳凰涅槃式再生,是至為根本也至為艱難的革命性一躍  江浙地區(qū)一批“小巨人”近年遭遇的成長乏力和重重困境正引起廣泛關(guān)注。這些“小巨人”大體包括兩種

  作者:郭劍詳情


目前金融海嘯導(dǎo)致全球經(jīng)濟的重挫,使得太陽能光熱產(chǎn)業(yè)年的發(fā)展也蒙上一層陰影,作為行業(yè)的一分子,我建議太陽能行業(yè)的同仁要“微笑”地面對這場危機。 “微笑”的第一個含義,就是面對危機要充滿信心,信心比黃金

  作者:齊冰詳情


  互聯(lián)網(wǎng)經(jīng)歷了一對一的交流,一對多的交流,多對多的交流,隨著博客網(wǎng)絡(luò)社區(qū)和播客的快速發(fā)展使中國也快速進入了Web2.0時代。中國博客05年用戶達到600萬,06年達到17520萬,予以2007年達到

  作者:王穎詳情


版權(quán)聲明:

本網(wǎng)刊登/轉(zhuǎn)載的文章,僅代表作者個人或來源機構(gòu)觀點,不代表本站立場,本網(wǎng)不對其真?zhèn)涡载?fù)責(zé)。
本網(wǎng)部分文章來源于其他媒體,本網(wǎng)轉(zhuǎn)載此文只是為 網(wǎng)友免費提供更多的知識或資訊,傳播管理/培訓(xùn)經(jīng)驗,不是直接以贏利為目的,版權(quán)歸作者或來源機構(gòu)所有。
如果您有任何版權(quán)方面問題或是本網(wǎng)相關(guān)內(nèi)容侵犯了您的權(quán)益,請與我們聯(lián)系,我們核實后將進行整理。


人才招聘 免責(zé)聲明 常見問題 廣告服務(wù) 聯(lián)系方式 隱私保護 積分規(guī)則 關(guān)于我們 登陸幫助 友情鏈接
COPYRIGT @ 2001-2018 HTTP://m.musicmediasoft.com INC. ALL RIGHTS RESERVED. 管理資源網(wǎng) 版權(quán)所有