據媒體報道，百度、字節跳動(dòng)、騰訊和阿里巴巴等互聯(lián)網(wǎng)巨頭正爭相收購英偉達的高性能芯片，已訂購了價(jià)值 10 億美元的 A800 處理器，這些訂單價(jià)值 50 億美元，將于今年交付。此外，這些公司還采購了 40 億美元的英偉達圖形處理器(GPU)，將于 2024 年交付。

　　對此，《科創(chuàng )板日報》記者詢(xún)問(wèn)百度、騰訊和阿里巴巴方面，均未有回應。

　　不過(guò)，阿里巴巴集團董事會(huì )主席兼 CEO 張勇在財報溝通會(huì )上坦言，GPU 在中國市場(chǎng)供應確實(shí)緊缺。“新一代人工智能發(fā)展帶來(lái)的模型訓練和推理場(chǎng)景，對 AI 云服務(wù)的需求非常旺盛，但是由于短期內 GPU 在中國市場(chǎng)供應的緊缺，使得這樣的需求只得到了部分滿(mǎn)足，AI 相關(guān)服務(wù)所帶來(lái)的增量機會(huì )剛剛開(kāi)始得到釋放。”

　　有大模型創(chuàng )業(yè)公司高層向《科創(chuàng )板日報》透露，”相比 5 月份英偉達芯片上漲了百分之小幾十，A100 和 H100 都已經(jīng)買(mǎi)不到了。”

　　一家算力服務(wù)平臺的相關(guān)人員告訴《科創(chuàng )板日報》記者，當前算力資源較為緊缺，有幾百家企業(yè)都在排隊。

　　未來(lái)推理算力需求或遠高于訓練算力

　　隨著(zhù) AI 大模型加速在實(shí)際場(chǎng)景落地，算力需求也隨之激增。

　　以 AI 應用“妙鴨相機”為例，其上線(xiàn)不到一個(gè)月，算力需求暴漲數百倍。據相關(guān)負責人透露，“妙鴨相機”已在阿里云上進(jìn)行緊急擴容，應對暴漲數百倍的算力需求。雖然算力一邊加，但另一邊用戶(hù)也在漲，但高峰期排隊現象已經(jīng)有了緩解。

　　“此前，大家對大模型訓練需要的算力關(guān)注較多，尤其是 GPT 類(lèi)的模型訓練，動(dòng)輒需要上萬(wàn)張顯卡。”某資深人士分析，隨著(zhù) Llama2 等開(kāi)源大模型的流行，大模型應用推理端的算力需求更值得關(guān)注。隨著(zhù)各個(gè)行業(yè)的 AIGC 開(kāi)發(fā)逐步完成，對業(yè)務(wù)開(kāi)展階段使用的推理算力需求開(kāi)始大幅增長(cháng)，未來(lái)幾個(gè)月推理的算力需求總量可能遠高于訓練算力。

　　優(yōu)刻得董事長(cháng)兼 CEO 季昕華認為，未來(lái)對 GPU 的需求會(huì )繼續增長(cháng)。“國產(chǎn)大模型的玩家越來(lái)越多，算力需求越來(lái)越高漲，同時(shí)大模型訓練的數量、數據和參數越來(lái)越大，也導致需求越來(lái)越多。其中，對推理算力的需求會(huì )更大。

　　“這是因為推理和用戶(hù)數直接相關(guān)。目前，優(yōu)刻得用于客戶(hù)訓練的 GPU 和推理的 GPU 的比例大概在3:7。假設三萬(wàn)張卡做訓練的話(huà)，對應到七萬(wàn)張卡做推理，這也是為何 ChatGPT 會(huì )限制大家使用和注冊，就是因為推理(的卡)不夠。” 季昕華說(shuō)，“如今受限于整個(gè)供應鏈，全球缺貨。雖然我們能買(mǎi)，但是到貨時(shí)間會(huì )很難。此外，也受限于整個(gè)美國的政策，對 A100 和 H100 有限制。”

　　國產(chǎn)芯片相比英偉達仍有差距

　　當下，已有不少?lài)鴥绕髽I(yè)入局 AI 芯片，包括華為昇騰、寒武紀、天數智芯、燧原科技、沐曦科技、壁仞科技等。

　　“國內真正已經(jīng)參與大模型訓練的廠(chǎng)商，主要是華為昇騰、寒武紀。”一位 AI 專(zhuān)家指出。“其他初創(chuàng )企業(yè)的痛點(diǎn)，主要是生態(tài)上不夠成熟，但在細分領(lǐng)域可以落地，比如，燧原科技在某些領(lǐng)域的加速表現不錯。”

　　另有大模型創(chuàng )業(yè)者對《科創(chuàng )板日報》記者表示，目前已經(jīng)與昇騰、燧原等國產(chǎn)芯片進(jìn)行適配。“雖然距離英偉達高端芯片還需要加油，華為昇騰在國產(chǎn)芯片中已經(jīng)很優(yōu)秀了。”

　　一位相關(guān)芯片技術(shù)人員則向記者強調，昇騰芯片在某些深度學(xué)習的特定場(chǎng)景上性能已經(jīng)趕上英偉達。

　　天數智芯相關(guān)負責人則對記者表示，其產(chǎn)品已成功支撐大模型訓練、推理，取得一定程度的突破。此外，在數據中心、能源、教育以及醫療等方面都有訂單，整體銷(xiāo)售額已經(jīng)突破 5 億。

　　“國產(chǎn)芯片和英偉達的差距主要在于生態(tài)和通信性能。”季昕華指出，“現在大部分的人工智能方案都是基于英偉達的 CUDA 平臺，國產(chǎn)芯片需要兼容 CUDA 架構，對生態(tài)要求還是比較高的。其次，在整個(gè)通信的性能上仍有挑戰，推理今年能夠實(shí)現使用，但訓練方面還需要一點(diǎn)時(shí)間。不過(guò)進(jìn)步非?？?。我們現在也積極地與國產(chǎn) GPU 對接，能讓他們用起來(lái)。”
　?。?a href="http://m.lsbmaoyi.com">邯鄲小程序）