版權歸原作者所有,如有侵權,請聯(lián)系我們

百度的云圖丹青

腦極體
從技術協(xié)同到產(chǎn)業(yè)革命,從智能密鑰到已知盡頭
收藏

云計算與AI的關系,在幾年間經(jīng)歷了數(shù)次變化。

最開始,基于云計算提供AI服務僅僅是方向和趨勢,輸送能力以基礎算法為主。隨后,開始出現(xiàn)基于云計算提供體系化的AI訓練、開發(fā)、部署與應用服務。云與AI緊密的關系更加緊密,可以滿足企業(yè)的復雜智能化需求。

那么,云與AI的下一步是什么?

按照產(chǎn)業(yè)期待和技術發(fā)展趨勢,“云+AI”的下一步應該走向基礎設施緊密耦合,無論是開發(fā)還是應用需求都能被充分滿足,各種智能化需求都能在云計算體系中得到充分釋放的新形態(tài)。這個階段,AI不再是云計算的“嵌入物,而是呈現(xiàn)給用戶和開發(fā)者AI原生云,云與智能高度一體化的產(chǎn)業(yè)特征。

在國畫丹青里,我們能見到的不是一山一石、一草一木,而是浩蕩山河,琳瑯草木。真正適配行業(yè)智能化需求,滿足工業(yè)級AI需求的云計算體系,也應該是一幅諸多領先技術、核心能力與服務體系構成的悠悠長卷。在百度智能云看來,這副長卷應該叫做“AI原生云”。

去年10月,百度智能云首次提出了“AI原生云”的行業(yè)判斷與產(chǎn)業(yè)設想。經(jīng)歷了快節(jié)奏發(fā)展,在6月3日的百度云智峰會智能計算峰會中,我們可以看到AI原生云的構成要件已經(jīng)十分豐富,核心產(chǎn)品已經(jīng)充盈完善。不僅有百度滄海存儲技術與百度百舸AI異構計算平臺兩個新品牌首次亮相,百度智能云還發(fā)布和升級了一系列產(chǎn)品,最終組成一幅題為“AI原生云”的千里江山圖。

(6月3日,2021百度智能計算峰會,百度智能云布一系列AI原生云產(chǎn)品)

問道組筆:AI原生云的時代圖畫

很早之前我們就討論過,云計算與AI合流具有產(chǎn)業(yè)區(qū)位上的必然性。因為云計算的彈性特征是輸送智能的最佳方式,而通過云計算或許智能,也是企業(yè)門檻最低、效率最高的接入方式。

如今,AI已經(jīng)成為每一家云計算廠商的產(chǎn)業(yè)重心。在“云+AI”的方向確立后,下一步問題就是如何讓企業(yè)用戶和開發(fā)者更簡單、高效、低成本接入AI,負載工業(yè)級應用。如果云計算廠商是一位位畫師,AI是他們共同描摹的對象,那么第一步,就是要確定如何能畫出最精彩的AI。這是“云畫師”的求道。

整體而言,AI對云計算體系提出了三大挑戰(zhàn):

首先是AI的訓練、部署與應用帶來了高強度且復雜的異構計算需求,極大程度上改變了傳統(tǒng)的云端算力提供規(guī)則與服務器特性。

其次是AI在企業(yè)落地,需要部署在云、邊、端等多個場景,產(chǎn)生了令人眼花繚亂的分布式計算需求,繼而導致云廠商需要提供的平臺與服務種類極度增多。

還有一點,企業(yè)對于AI成本降低、難度下降的期待是始終不變的。如何滿足企業(yè)多樣化的開發(fā)與應用需求,讓算力成本降低、算法難度下降,也是云廠商始終不變的方向。

綜合這三條AI之道,“云畫師”需要重新組織筆法,編制產(chǎn)業(yè)藍圖,繪制技術差異化。而百度智能云為強異構、多端部署、簡單易用的“云智一體”的云計算架構,定義為“AI原生云”。

百度集團副總裁侯震宇認為:“ AI原生云是推動企業(yè)智能化升級的核心驅(qū)動力,AI原生云在算力層面提供面向AI場景的彈性高性能的異構算力,在應用開發(fā)層面,提供面向AI應用場景的系列低門檻開發(fā)平臺,幫助企業(yè)把AI應用架構做得更加簡潔、更加敏捷?!?/p>

丹青水墨,講究山為骨、水為魂。百度智能云認為,AI原生云的基礎是算力與應用開發(fā)平臺的多元融合。算力、數(shù)據(jù)、開發(fā)、應用平臺的山水相融,才能描畫出智能時代的潑墨長卷。

針對AI原生云必須具備的三大核心能力,即AI異構計算平臺、分布式云基礎設施、AI應用開發(fā)平臺,百度云智峰會智能計算峰會中一次發(fā)布升級了八大新品,其中包括有百度太行彈性裸金屬服務器3.0、百度滄海并行文件存儲PFS、第五代云服務器實例、智感超清一體機等等。

這些全面升級的AI基礎設施,就像一道道筆觸,組成了計算與智能的山河圖。

雄奇筑太行,云帆濟滄海

AI原生云這幅畫卷,首先需要的是作為基礎的算力和存儲。

適配AI需求,且充沛低成本的算力,以及與計算緊密相關的數(shù)據(jù)存儲能力,是AI發(fā)展的根基。就像水墨畫中的山,構成了整幅畫的骨架與輪廓,決定著丹青的走勢。

在百度智能云提供的AI原生云中,算力也與“山”緊密相連。百度智能云發(fā)布了新一代云基礎架構“太行”,基于百度自主研發(fā)的硬件虛擬化技術,重構百度智能云的算力基礎設施,同時擁有云服務器的資源彈性和物理機的高性能體驗,以滿足AI原生時代對海量算力的需求。

面向更具體的AI算力需求,百度智能云發(fā)布了百度太行彈性裸金屬服務器3.0。太行全面升級了彈性裸金屬全特性,實現(xiàn)對網(wǎng)絡卸載、PCIe設備熱插拔的支持,讓裸金屬可以和虛機一樣云磁盤快速啟動?;谛乱淮匝兄悄芫W(wǎng)卡,太行還能實現(xiàn)裸金屬、虛機、容器多種算力在網(wǎng)絡與存儲上的統(tǒng)一,充分匹配AI任務的計算需求。

如果說算力是山,那么數(shù)據(jù)的存放、調(diào)用、使能就是讓山色流淌,算力發(fā)生價值的水。為了滿足用戶應用AI時日益提高的高性能計算需求,百度智能云發(fā)布了存儲品牌滄海。

我們知道,數(shù)據(jù)是百度的核心優(yōu)勢,而數(shù)據(jù)的存、算、用也就必然是百度必須不斷強化的技術能力。在存儲領域,滄海就源于百度20多年的業(yè)務和客戶服務實踐,擁有存算一體、軟硬一體、云邊一體的技術優(yōu)勢;擁有極致速度、極致彈性、極致性價比、極致可靠、極致簡單的技術特性。

面向智能時代,高性能與海量存儲成為了企業(yè)上云、部署AI的關鍵支撐。而滄海可以從幾個方面解決核心的存儲問題。一是數(shù)據(jù)上云,提供了離線、在線數(shù)據(jù)上云的方式;二是解決數(shù)據(jù)存儲的問題,提出以對象存儲為核心,面向AI場景做了高速優(yōu)化的能力;三是面向AI場景,AI的訓練和處理分析的能力。

以分布式存儲場景為例,全新發(fā)布的滄海并行文件存儲PFS可以支持對象存儲數(shù)據(jù)連接,實現(xiàn)冷熱數(shù)據(jù)真正的聯(lián)通,數(shù)據(jù)綜合成本降低60%以上。并且滄海還覆蓋HPC場景的性能需求,具備超高性能超低延遲的關鍵特性。

讓數(shù)據(jù)的滄海與計算的太行相互圍繞,構成算力與數(shù)據(jù)底座牢不可破,源遠流長。

(圖:林德坤 國畫 - 云繞太行)

昆侖山下,百舸飛槳

算力和存儲是AI原生云的引擎,開發(fā)就是AI原生云的操作系統(tǒng)。讓用戶和開發(fā)者低成本、高效率、低難度完成AI開發(fā)與應用,是AI興起以來的永恒命題,也是百度在AI領域能夠筑起護城河的關鍵所在。

有了算力、存儲作為AI原生云的山?;A,開發(fā)平臺就化身為這幅圖畫中靈動的“舟”?;陂_發(fā)體系,可以匹配各行業(yè)開發(fā)者的個性需求,或面向工業(yè)級的挑戰(zhàn),或完成意想不到的細微創(chuàng)造;既要與實驗室中的專家學者共舞,又要幫助完全沒有代碼經(jīng)驗的開發(fā)者工作。

而在云計算場景中,異構計算是大量企業(yè)應用AI的最大挑戰(zhàn)。為了進一步幫助用戶降低AI開發(fā)門檻,完成工業(yè)級的AI落地,百度智能云推出了全新的AI異構計算平臺百舸,取意“百舸爭流,奮楫者先”。百度百舸由AI計算、AI存儲、AI容器三部分組成,可以針對不同的AI應用場景,完成不同計算自由、存儲資源、容器應用的彈性與高效互聯(lián),幫助用戶有效利用AI基礎設施。

在AI計算層面,不得不提百度自主研發(fā)的云端AI芯片百度昆侖和專為AI深度學習場景優(yōu)化設計的百度超級AI計算平臺X-MAN。

作為核心基礎計算單元,芯片占據(jù)了AI時代制高點。百度對AI芯片的需求十分明確。早在2010年,百度就已使用FPGA進行AI架構的研發(fā),隨后又不斷通過合作、投資和自研的方式來推進該業(yè)務。2018年,百度發(fā)布了百度自主研發(fā)的云端AI芯片“昆侖”。

2020年,昆侖1成果實現(xiàn)量產(chǎn),具有高性能、低成本、高靈活性、自主可控等關鍵特征,并且在百度搜索引擎和百度智能云生態(tài)伙伴等場景廣泛部署。昆侖芯片既能做訓練也能做推理,它可以滿足AI的高處理需求,用于云實例和邊緣實例,包括數(shù)據(jù)中心、公共云和自動駕駛汽車。

通過充分利用昆侖芯片的極限推送計算能力和功耗效率,百舸AI異構計算平臺可以有效支持多種功能,包括大規(guī)模的人工智能工作負載,如搜索排名、語音識別、圖像處理、自然語言處理、自動駕駛。昆侖的另一個關鍵優(yōu)勢,在于與眾多AI軟硬件體系完美適配,可以幫助應用者、開發(fā)者有效利用AI算力,最大化利用百度AI基礎設施?;诶鲂酒蛟斓陌俣壤鲈品掌?,可以為企業(yè)和開發(fā)者們提供超強的AI推理和訓練性能,加速AI技術與各行各業(yè)深度融合的步伐。

目前百度超級計算平臺X-MAN已經(jīng)升級到第四代,是業(yè)界首款支持OAI標準和液冷散熱的超級AI計算平臺,可解決CPU+GPU配比計算、通信帶寬瓶頸、高性能存儲三大問題。百度X-MAN超級AI計算平臺提供極致的計算性能,支持超大復雜算法模型,能夠快速及時處理海量數(shù)據(jù)。自誕生以來,百度X-MAN超級AI計算平臺歷經(jīng)3代發(fā)展,3次架構升級,創(chuàng)造6項業(yè)界第一,同時期關鍵技術&性能保持領先,引領行業(yè)發(fā)展趨勢。目前,X-MAN系列產(chǎn)品已在百度大規(guī)模應用,正在助力百度AI戰(zhàn)略快速落地。

若想在百舸爭流中更勝一籌,自然少不了一雙有力的槳。百度飛槳是中國首個開源開放、技術領先、功能完備的產(chǎn)業(yè)級深度學習平臺,宋代文人朱熹的“聞說雙飛槳,翩然下廣津”。目前飛槳已經(jīng)在大量行業(yè)中實踐落地,被譽為智能時代的操作系統(tǒng)。不久之前,飛槳剛剛迎來了全平臺升級與新發(fā)布,全新發(fā)布包括飛槳核心框架V2.1、大規(guī)模圖檢索引擎、文心ERNIE四大預訓練模型、推理部署導航圖、硬件生態(tài)進展、開放云原生機器學習核心PaddleFlow,并且全面啟動飛槳“大航?!庇媱?,合計投入15億資金,聚焦生態(tài)發(fā)展。

從飛槳到百舸,百度AI體系下的開發(fā)平臺、應用平臺正在一步步充沛完善,滿足從基礎開發(fā)、簡單開發(fā)、產(chǎn)業(yè)級應用等不同場景下的AI落地。很多科學家都暢想過,在未來應用AI應該是一件自然而然,無需學習門檻的事。

AI原生云,正在讓人工智能應用開發(fā)的設想逐步落筆于現(xiàn)實。更值得一提的是,百度百舸、百度昆侖、百度飛槳讓中國在AI核心底層技術上擁有自主知識產(chǎn)權,組成了名副其實的中國AI畫卷。

結束語:AI丹青畫萬物

一口氣發(fā)布、升級八大AI原生云產(chǎn)品,足可見百度智能云在AI原生云這條全新賽道上的篤定與決心。這種戰(zhàn)略定力的根源,在于AI與云的融合關系是一件合乎邏輯,順乎需求的事。

無數(shù)個行業(yè)、無數(shù)個場景,都在以云為通道,以AI為跳板,升級自己的生產(chǎn)力,讓不可能變?yōu)榭赡堋K麄兊墓适潞统晒?,點滴落入現(xiàn)實,最終繪成智能時代的畫卷。

為了AI丹青,可畫萬物的目標,今天產(chǎn)業(yè)各界依舊需要全力奔跑,用計算撬動生產(chǎn)率,用智能打開行業(yè)可能。

時間來到2021年,百度智能云所描繪的,一幅屬于AI的云圖已經(jīng)初現(xiàn)端倪。而接下來“AI原生云”的畫筆,更多還是要交給來自千行百業(yè)的用戶,交給擁有無限想象力的開發(fā)者。

這幅智能圖卷中,應該每個人都是畫手。

太行、昆侖、滄海、百舸、飛槳這些名字背后,我們能隱隱讀到一種壯志。百度智能云的壯志,是讓每家企業(yè)都能以云為筆,智作墨,畫一幅自己的傳奇。

評論
殘血也能歐拉你
秀才級
??
2022-07-09