中國互聯(lián)網(wǎng)大廠加碼訂購！英偉達(dá)GPU繼續(xù)漲價 國產(chǎn)芯片仍缺生態(tài)加持

據(jù)媒體報道，百度、字節(jié)跳動、騰訊和阿里巴巴等互聯(lián)網(wǎng)巨頭正爭相收購英偉達(dá)的高性能芯片，已訂購了價值10億美元的A800處理器，這些訂單價值50億美元，將于今年交付。此外，這些公司還采購了40億美元的英偉達(dá)圖形處理器（GPU），將于2024年交付。

對此，《科創(chuàng)板日報》記者詢問百度、騰訊和阿里巴巴方面，均未有回應(yīng)。

不過，阿里巴巴集團(tuán)董事會主席兼CEO張勇在財報溝通會上坦言，GPU在中國市場供應(yīng)確實緊缺?！靶乱淮斯ぶ悄馨l(fā)展帶來的模型訓(xùn)練和推理場景，對AI云服務(wù)的需求非常旺盛，但是由于短期內(nèi)GPU在中國市場供應(yīng)的緊缺，使得這樣的需求只得到了部分滿足，AI相關(guān)服務(wù)所帶來的增量機(jī)會剛剛開始得到釋放?！?/p>

有大模型創(chuàng)業(yè)公司高層向《科創(chuàng)板日報》透露，”相比5月份英偉達(dá)芯片上漲了百分之小幾十，A100和H100都已經(jīng)買不到了?！?/p>

一家算力服務(wù)平臺的相關(guān)人員告訴《科創(chuàng)板日報》記者，當(dāng)前算力資源較為緊缺，有幾百家企業(yè)都在排隊。

▍未來推理算力需求或遠(yuǎn)高于訓(xùn)練算力

隨著AI大模型加速在實際場景落地，算力需求也隨之激增。

以AI應(yīng)用“妙鴨相機(jī)”為例，其上線不到一個月，算力需求暴漲數(shù)百倍。據(jù)相關(guān)負(fù)責(zé)人透露，“妙鴨相機(jī)”已在阿里云上進(jìn)行緊急擴(kuò)容，應(yīng)對暴漲數(shù)百倍的算力需求。雖然算力一邊加，但另一邊用戶也在漲，但高峰期排隊現(xiàn)象已經(jīng)有了緩解。

“此前，大家對大模型訓(xùn)練需要的算力關(guān)注較多，尤其是GPT類的模型訓(xùn)練，動輒需要上萬張顯卡?！蹦迟Y深人士分析，隨著Llama2等開源大模型的流行，大模型應(yīng)用推理端的算力需求更值得關(guān)注。隨著各個行業(yè)的AIGC開發(fā)逐步完成，對業(yè)務(wù)開展階段使用的推理算力需求開始大幅增長，未來幾個月推理的算力需求總量可能遠(yuǎn)高于訓(xùn)練算力。

優(yōu)刻得董事長兼CEO季昕華認(rèn)為，未來對GPU的需求會繼續(xù)增長。“國產(chǎn)大模型的玩家越來越多，算力需求越來越高漲，同時大模型訓(xùn)練的數(shù)量、數(shù)據(jù)和參數(shù)越來越大，也導(dǎo)致需求越來越多。其中，對推理算力的需求會更大。

“這是因為推理和用戶數(shù)直接相關(guān)。目前，優(yōu)刻得用于客戶訓(xùn)練的GPU和推理的GPU的比例大概在3:7。假設(shè)三萬張卡做訓(xùn)練的話，對應(yīng)到七萬張卡做推理，這也是為何ChatGPT會限制大家使用和注冊，就是因為推理（的卡）不夠?！?季昕華說，“如今受限于整個供應(yīng)鏈，全球缺貨。雖然我們能買，但是到貨時間會很難。此外，也受限于整個美國的政策，對A100和H100有限制?！?/p>

▍國產(chǎn)芯片相比英偉達(dá)仍有差距

當(dāng)下，已有不少國內(nèi)企業(yè)入局AI芯片，包括華為昇騰、寒武紀(jì)、天數(shù)智芯、燧原科技、沐曦科技、壁仞科技等。

“國內(nèi)真正已經(jīng)參與大模型訓(xùn)練的廠商，主要是華為昇騰、寒武紀(jì)。”一位AI專家指出?！捌渌鮿?chuàng)企業(yè)的痛點，主要是生態(tài)上不夠成熟，但在細(xì)分領(lǐng)域可以落地，比如，燧原科技在某些領(lǐng)域的加速表現(xiàn)不錯。”

另有大模型創(chuàng)業(yè)者對《科創(chuàng)板日報》記者表示，目前已經(jīng)與昇騰、燧原等國產(chǎn)芯片進(jìn)行適配。“雖然距離英偉達(dá)高端芯片還需要加油，華為昇騰在國產(chǎn)芯片中已經(jīng)很優(yōu)秀了?！?/p>

一位相關(guān)芯片技術(shù)人員則向記者強(qiáng)調(diào)，昇騰芯片在某些深度學(xué)習(xí)的特定場景上性能已經(jīng)趕上英偉達(dá)。

天數(shù)智芯相關(guān)負(fù)責(zé)人則對記者表示，其產(chǎn)品已成功支撐大模型訓(xùn)練、推理，取得一定程度的突破。此外，在數(shù)據(jù)中心、能源、教育以及醫(yī)療等方面都有訂單，整體銷售額已經(jīng)突破5億。

“國產(chǎn)芯片和英偉達(dá)的差距主要在于生態(tài)和通信性能?！奔娟咳A指出，“現(xiàn)在大部分的人工智能方案都是基于英偉達(dá)的CUDA平臺，國產(chǎn)芯片需要兼容CUDA架構(gòu)，對生態(tài)要求還是比較高的。其次，在整個通信的性能上仍有挑戰(zhàn)，推理今年能夠?qū)崿F(xiàn)使用，但訓(xùn)練方面還需要一點時間。不過進(jìn)步非?？?。我們現(xiàn)在也積極地與國產(chǎn)GPU對接，能讓他們用起來?！?/p>