2020年6月6日,快手公司與烏蘭察布市簽署項目,投資100億元人民幣在當地自建數據中心,部署約30萬台服務器,存儲量相當於300萬個國家圖書館。
快手數據中心技術負責人張子堅對智東西說,建成後這個數據中心主要用於大數據和AI訓練,這或許是國內最大的專為人工智能、大數據打造的數據中心!
用百億數據中心擁抱國家數字新基建,這個國民短視頻頭部玩家的做法就是這麼直接!
▲烏蘭察布市與快手簽約現場
經過2020上半年的醞釀,數字新基建無疑成為國家拉動經濟增長的一大戰略。在一片萬億數字新基建藍海前,國內的科技巨頭紛紛宣布大舉加碼數據中心,比如阿裏、騰訊都前後腳火速簽約了大型數據中心項目。
相比於BAT,2011年成立的快手無疑是互聯網圈的“後浪”。從一個Gif生成工具蛻變為日活3億、日播放200億、每年幫千萬人收益百億元的短視頻內容社區,快手的發展速度令人咋舌。
2020年的一場新冠肺炎疫情之後,以快手為代表的短視頻平台的流量閉環生態發展按下了快進鍵。
這邊,攜程、去哪兒網的CEO剛在快手上拉來千萬元旅遊訂單;那邊,格力“董小姐”3個小時成交額破3億元,驚豔四座!而近日快手與京東集團達成戰略合作,明顯是要站在巨人的“產品供應及電商設施”肩膀上,劍指一片短視頻驅動的流量生態閉環“星辰大海”。
“星辰大海”的背後,快手的業務對底層算力和存儲力的“胃口”也越來越大。基於這樣的背景,快手豪氣出手數據中心,其新建的烏蘭察布項目有望一舉成為國內最大的專門為“大數據、人工智能”建設的數據中心。下一步,快手還將在華北、華南、華東等地區進行超大規模IDC(Internet Data Center,互聯網數據中心)布局。
快手為什麼要如此大手筆自建數據中心?敞開懷擁抱新基建的背後有什麼樣的底氣和野心?這是快手自身一直在探尋的答案,也是智東西本次想要探討的主題。
盯準“草原雲穀”,沒想到“一出道即巔峰”
我們先來看一組數據。
2020年春節,快手成為2020央視春晚獨家互動合作夥伴。除夕當晚快手春晚直播間累計觀看人數 7.8 億次,10億紅包五輪互動累計互動次數 639 億次,一舉刷新百度在2019年創下的208 億次的記錄。快手App,也在當時一躍成為華為、蘋果等手機應用商店下載榜一二名。
不輸阿裏、百度前兩年春晚的表現,快手讓全國觀眾見證了自己的技術實力。這背後,同時也意味著這家國民短視頻大廠對數據中心的需求越來越大!其實,快手在此之前就開始籌劃自建大規模IDC。
時間拉回到2019年下半年,張子堅和他的團隊正在緊鑼密鼓地為快手數據中心選址。
張子堅是快手數據中心技術負責人,他曾在百度負責自建IDC的落地,作為中國第一代“現代IDC”開拓者,曾參與推動的多項新技術架構落地影響了整個中國IDC行業技術發展。2019年4月,張子堅加盟快手。
“大規模IDC一般有2年的建設周期,快手當時規劃數據中心,實際是著眼未來業務需求。”張子堅告訴智東西,“我們從2019年下半年就開始反複做籌劃,在華北多地做過許多調研,最後發現,烏蘭察布當地政府對這個產業非常支持!”
烏蘭察布市政府早在2018年就將“草原雲穀”作為發展導向,當地的配套設施已經非常完備。同時,烏蘭察布所在的內蒙古自治區的電力政策優惠力度很大,在國內可以達到最低價,能大大降低數據中心的運作成本。
▲內蒙古自治區轄市烏蘭察布
“所以我們當時就考慮把一些大數據和人工智能相關的業務準備遷移到內蒙古。”張子堅說,“這些業務對網絡延時不是那麼敏感,可以放在相對比較遠的位置。”
當時的張子堅沒有想到,他的這些行動會在2020年成為快手擁抱數字新基建——這一未來幾年中國經濟發展最重要戰略之一的最堅實鋪墊!
新基建早在2018年中央經濟工作會議上就被提出,2020年3月,中央政治局常委會把新基建提到了新的戰略高度。隨著4月新基建被國家發改委明確劃分三大範圍並在5月被寫入2020政府工作報告,數字新基建成為拉動中國經濟發展的最重要戰略之一,在全社會引起了一股新基建熱。
這對於張子堅來說壓力不小,自建數據中心任務上的砝碼變重,加入快手一年的他坦言有種“一出道即巔峰”的感覺。
“最大的感受就是發展太快了,會導致我們的工作思維方式會有非常大的不同,會站在未來三五年的角度看我現在應該怎麼來做。”
按計劃,快手烏蘭察布數據中心將分兩期施工,預計在2021年12月實現一期啟用。屆時,快手烏蘭察布數據中心有望成為國內最大的專為人工智能、大數據打造的數據中心!
站在未來看短視頻的生態和AI遠景快手果斷提前布局IDC
很多人了解的快手,是一個讓人們在這裏“看到一萬種生活”的短視頻App。視頻雖然短小,但日均1500萬個新增作品彙聚背後的存儲“胃口”卻無比巨大。
據說,大約每7個中國人中就有一個快手的內容生產者,快手每月的短視頻容量達到PB級別。視頻本身比圖文占空間,盡管高達80%的視頻對用戶來說是“冷數據”,但快手依然需要花費大量空間來放置這些許多人的“生活痕跡”。而快手勢如破竹的直播業務,對數據中心的需求更是不言而喻。
除了基本的視頻業務,快手對存儲、網絡、計算等方麵的需求更來自於強大的AI和大數據應用。
有許多AI應用能被用戶直觀看到,比如用戶在 拍視頻時可以用“梵高”特效中的場景語義分割、“雷神”中的手勢識別、國內首創的“智能剪影”、智能配樂等特效。
還有更多的AI和大數據能力則隱藏在冰山一角之下。
在內容安全、原創保護和視頻配音等方麵,快手會采用知識圖譜、語義理解、分類檢索等技術實現“多模態內容理解”。因此,AI可以幫平台快速審核內容是否涉及黃賭毒,判別內容是否山寨其它的網紅視頻。在視頻增強、轉碼、播放、渲染以及直播和遊戲服務多個環節的智能技術,比如將720P視頻提升到1080P的超分算法等。
而在視頻推薦這一最依賴AI和大數據的方麵,快手更是采用全新的“基礎曝光+爬坡”的機製,使得所有用戶的內容被平等關注,又沉澱精品,平衡流量分配。
在豐富實用的智能功能和AI驅動的流量分配機製下,這家以短視頻為核心的內容社區的生態架構壁壘逐漸形成。
以短視頻/直播電商為例,在AI的作用下,平台會適當將大主播的流量分配給長尾用戶,從而減弱流量維度的“貧富差距”。
不僅格力“董小姐”可以賣貨3億元,成千上萬的小微企業也能在快手上獲得“擺攤”曝光和產品變現的機會,高山上的茶民、烈陽下采摘的果農、手藝快要失傳的民間工匠都能在這裏獲得平等的收益機會。
據統計,目前快手電商日活已經超一億,100萬用戶擁有潛在經營行為,2018年有1900多萬人通過快手App獲得收益,總體收超過200億。
近年來,AI和大數據的驅動作用,已經滲透在了快手從“內容生產”到理解、分發、消費、互動的各個環節。這使得快手AI應用的數據中心在存儲、網絡、計算三個方麵麵臨巨大挑戰。
張子堅說,我們2019年的數據中心規模快速擴張,是業務發展的一個映射。
來自業務對數據中心的需求,快手數據中心部門要怎麼處理?張子堅說,一種方法是當年需求當年解決,這樣沒有規劃的方法會帶來很多後續問題。眾多零散的小數據中心會給業務、運營管理、財務等方麵帶來很大的壓力。因此,提前規劃大規模IDC,成為快手義不容辭的選擇。
值得一提的是,針對其它短視頻頭部企業大規模采用租用服務器的做法,張子堅表示,快手會看的遠一些,“如果社會資源在關鍵時候沒有辦法來供應給快手,會極大阻礙業務的發展。”
很好理解,就像買房相比於租房的優越性,有些東西還是自己有了才踏實。快手現在能“買房”了,為什麼不呢?
“我們目前的階段就是為未來五年左右做的一個全盤性的規劃。在深度剖析和參考了國內外的幾家大公司的IDC發展曆程後,我們認為這個階段快手是要開始規劃體量非常大的數據中心,解決未來的長期問題,而不是看到眼前。”
可以看到,快手的邏輯非常明確。一邊在擁抱新基建,緊跟國家經濟發展步伐,一邊站在未來看現在的自己,為今後的短視頻流量閉環生態及AI大數據布局未雨綢繆。
技術底氣:首個業內完全自建方案,規模相當於300萬個國家圖書館
快手在數據中心技術方麵的積累非常迅速。回顧快手建設數據中心的曆程,張子堅說可以分為三個階段。
第一個階段是快手比較小的時候,快手數據中心的布局也比較小;第二個階段是2019年,主要布局是在北京,數目多相對散亂;第三個階段就是現在,從2020年開始,快手數據中心達到了相當大的規模,快手會朝著未來三五年做一個整體的規劃。
隨著業務需求快速增長,社會化供應的數據中心跟不上快手的需求,因此快手增加了自建的選項,而此時外部的數據中心技術也跟不上快手的需求後,快手選擇全部端到端自主研發。
張子堅說:“我們就是要把一個事情做到極致,因為你自己對自己想要什麼東西才更為清楚。”跟據已經披露的消息可知:
在IDC方麵,快手將采用完全自主研發方式,預期最佳PUE1.08,平均PUE1.15。同時,快手還會采用新一代高壓直流技術規模應用,較業內方案降低10%建設成本;新一代間接蒸發冷卻係統規模應用,較業內方案節水60%。
在服務器方麵,快手計劃部署30萬台AI和大數據服務器,達到60EB以上的總存儲容量,相當於超過300萬個國家圖書館信息存儲量。同時,這些服務器將采用快手自研的創新架構,能兼容整機櫃方式和傳統方式,實現解耦,提升整體靈活性。
在網絡規劃、建設及平台方麵,快手將在數據中心內規模化部署高性能無損以太網(RDMA),以支持AI對算力更高的要求。除此之外,還將針對AI等需求,采用定製化芯片。
張子堅說,在適當時間,快手將會把自己的數據中心技術方案開源。可見,快手著眼的並不僅僅是滿足自身當下的計算存儲需求,還意在參與到未來千行百業新業態的進程中扮演重要角色。快手,一個新一代互聯網後浪的大廠實力已經不自覺“露富”。
新基建土壤上的IDC大潮
據統計,我國IDC數量約占到全球總量的23%,北上廣深等一線城市成為數據中心集中地。近年來,數據中心從粗放到集約、從一線城市向二三線轉換的趨勢日益明顯,同時增長潛力巨大,預測2025年中國數據中心IT投資將超7000億元。
2020年國家數字新基建政策的推進,又為我國IDC發展注入一劑猛藥。各地政府、企事業單位紛紛加強了數據中心的建設及網絡資源業務整合力度,與同舉並進的5G、工業互聯網以及人工智能技術和應用協同發展。
東邊,張江長三角科技城平湖園投資130億建10萬機櫃;中部,張家口普洛斯懷來大數據科技園百億IDC項目5月開工;西部,昆明近600億新基建項目,數據中心成為重中之重……
新基建催促各地數據中心的建設的節奏以倍速前進。對於烏蘭察布這樣的地方來說,本來數據中心帶來的直接的百億投資、市民就業和日後的產業集聚效應、城市規劃推進等利好已經足夠有吸引力;現在,中央又再次定調新基建,就更為地區新業態的發展轉型指明了方向。
當下互聯網行業的大規模數據中心主要麵向雲服務,根據Gartner最新預測,受新冠疫情影響,預計中國2020年IT支出整體下降2.3%,但以公有雲為主的雲服務支出預計將逆勢增長19%。
企業這邊,騰訊、阿裏的大手筆令人直呼,“雲計算雙雄”的“軍備競賽”來了。與此同時,以快手為代表的“後浪”已暗暗將目光投向了這片廣闊的市場。雖然快手等企業的數據中心項目大多數都仍是滿足企業自用,但站在未來看,雲服務的市場格局或許會隨著AI物聯應用的爆發而產生深刻變化。
國家新基建政策的浪潮與數字中心的建設浪潮一起奔湧而來,地方和企業一方麵為自身的產業、業務的下一步發展未雨綢繆,也是將個體的奮鬥融入了整個國民經濟發展的進程當中。
結語:新基建潮頭,互聯網後浪的躍遷
對於快手這樣的新晉互聯網後浪來說,百億大型數據中心建設無疑是一件成本高、周期長、技術投入重的大工程。麵對數字新基建大潮,快手選擇長遠規劃布局擁抱數字新基建,是實力的象征,也表明其在短視頻業務之上的頂層戰略的深思遠慮。
或許多年後回首,像張子堅這樣的工程師會發現,這是一個多好的個體奮鬥與國家經濟發展如此緊密結合的時代。而他們,多麼適時地抓住了機遇,在互聯網時代向AI物聯時代跨越的這個過渡點上做出了正確的事情。
機器人招商Disinfection Robot機器人公司機器人應用智能醫療物聯網機器人排名機器人企業機器人政策教育機器人迎賓機器人機器人開發獨角獸消毒機器人品牌消毒機器人合理用藥地圖 |