中國互聯(lián)網(wǎng)大廠加碼訂購！英偉達GPU繼續(xù)漲價 國產(chǎn)芯片仍缺生態(tài)加持

據(jù)媒體報道，百度、字節(jié)跳動、騰訊和阿里巴巴等互聯(lián)網(wǎng)巨頭正爭相收購英偉達的高性能芯片，已訂購了價值10億美元的A800處理器，這些訂單價值50億美元，將于今年交付。此外，這些公司還采購了40億美元的英偉達圖形處理器（GPU），將于2024年交付。

對此，《科創(chuàng)板日報》記者詢問百度、騰訊和阿里巴巴方面，均未有回應(yīng)。

不過，阿里巴巴集團董事會主席兼CEO張勇在財報溝通會上坦言，GPU在中國市場供應(yīng)確實緊缺?！靶乱淮斯ぶ悄馨l(fā)展帶來的模型訓練和推理場景，對AI云服務(wù)的需求非常旺盛，但是由于短期內(nèi)GPU在中國市場供應(yīng)的緊缺，使得這樣的需求只得到了部分滿足，AI相關(guān)服務(wù)所帶來的增量機會剛剛開始得到釋放。”

有大模型創(chuàng)業(yè)公司高層向《科創(chuàng)板日報》透露，”相比5月份英偉達芯片上漲了百分之小幾十，A100和H100都已經(jīng)買不到了?！?/p>

一家算力服務(wù)平臺的相關(guān)人員告訴《科創(chuàng)板日報》記者，當前算力資源較為緊缺，有幾百家企業(yè)都在排隊。

▍未來推理算力需求或遠高于訓練算力

隨著AI大模型加速在實際場景落地，算力需求也隨之激增。

以AI應(yīng)用“妙鴨相機”為例，其上線不到一個月，算力需求暴漲數(shù)百倍。據(jù)相關(guān)負責人透露，“妙鴨相機”已在阿里云上進行緊急擴容，應(yīng)對暴漲數(shù)百倍的算力需求。雖然算力一邊加，但另一邊用戶也在漲，但高峰期排隊現(xiàn)象已經(jīng)有了緩解。

“此前，大家對大模型訓練需要的算力關(guān)注較多，尤其是GPT類的模型訓練，動輒需要上萬張顯卡。”某資深人士分析，隨著Llama2等開源大模型的流行，大模型應(yīng)用推理端的算力需求更值得關(guān)注。隨著各個行業(yè)的AIGC開發(fā)逐步完成，對業(yè)務(wù)開展階段使用的推理算力需求開始大幅增長，未來幾個月推理的算力需求總量可能遠高于訓練算力。

優(yōu)刻得董事長兼CEO季昕華認為，未來對GPU的需求會繼續(xù)增長。“國產(chǎn)大模型的玩家越來越多，算力需求越來越高漲，同時大模型訓練的數(shù)量、數(shù)據(jù)和參數(shù)越來越大，也導致需求越來越多。其中，對推理算力的需求會更大。

“這是因為推理和用戶數(shù)直接相關(guān)。目前，優(yōu)刻得用于客戶訓練的GPU和推理的GPU的比例大概在3:7。假設(shè)三萬張卡做訓練的話，對應(yīng)到七萬張卡做推理，這也是為何ChatGPT會限制大家使用和注冊，就是因為推理（的卡）不夠?！?季昕華說，“如今受限于整個供應(yīng)鏈，全球缺貨。雖然我們能買，但是到貨時間會很難。此外，也受限于整個美國的政策，對A100和H100有限制。”

▍國產(chǎn)芯片相比英偉達仍有差距

當下，已有不少國內(nèi)企業(yè)入局AI芯片，包括華為昇騰、寒武紀、天數(shù)智芯、燧原科技、沐曦科技、壁仞科技等。

“國內(nèi)真正已經(jīng)參與大模型訓練的廠商，主要是華為昇騰、寒武紀。”一位AI專家指出。“其他初創(chuàng)企業(yè)的痛點，主要是生態(tài)上不夠成熟，但在細分領(lǐng)域可以落地，比如，燧原科技在某些領(lǐng)域的加速表現(xiàn)不錯?！?/p>

另有大模型創(chuàng)業(yè)者對《科創(chuàng)板日報》記者表示，目前已經(jīng)與昇騰、燧原等國產(chǎn)芯片進行適配?！半m然距離英偉達高端芯片還需要加油，華為昇騰在國產(chǎn)芯片中已經(jīng)很優(yōu)秀了。”

一位相關(guān)芯片技術(shù)人員則向記者強調(diào)，昇騰芯片在某些深度學習的特定場景上性能已經(jīng)趕上英偉達。

天數(shù)智芯相關(guān)負責人則對記者表示，其產(chǎn)品已成功支撐大模型訓練、推理，取得一定程度的突破。此外，在數(shù)據(jù)中心、能源、教育以及醫(yī)療等方面都有訂單，整體銷售額已經(jīng)突破5億。

“國產(chǎn)芯片和英偉達的差距主要在于生態(tài)和通信性能。”季昕華指出，“現(xiàn)在大部分的人工智能方案都是基于英偉達的CUDA平臺，國產(chǎn)芯片需要兼容CUDA架構(gòu)，對生態(tài)要求還是比較高的。其次，在整個通信的性能上仍有挑戰(zhàn)，推理今年能夠?qū)崿F(xiàn)使用，但訓練方面還需要一點時間。不過進步非?？?。我們現(xiàn)在也積極地與國產(chǎn)GPU對接，能讓他們用起來?！?/p>