來(lái)源:AI范兒
Nvidia CEO 黃仁勛表示,公司 AI 芯片性能的進(jìn)步速度已經(jīng)超越了摩爾定律 —— 這個(gè)曾經(jīng)主導(dǎo)計(jì)算技術(shù)發(fā)展數(shù)十年的準(zhǔn)則。
在拉斯維加斯 CES 大會(huì)上對(duì) 10,000 名觀眾發(fā)表主題演講后的第二天早上,黃仁勛在接受采訪時(shí)說(shuō):"我們的系統(tǒng)發(fā)展速度遠(yuǎn)超摩爾定律。"
摩爾定律由 Intel 聯(lián)合創(chuàng)始人 Gordon Moore 于 1965 年提出,預(yù)測(cè)芯片上的晶體管數(shù)量約每年翻倍,從而使芯片性能翻倍。這一預(yù)測(cè)在之后的數(shù)十年里基本實(shí)現(xiàn),推動(dòng)了計(jì)算能力的快速提升和成本的大幅下降。
雖然近年來(lái)摩爾定律的發(fā)展勢(shì)頭已經(jīng)減緩,但黃仁勛表示 Nvidia 的 AI 芯片正以更快的速度發(fā)展。公司稱其最新數(shù)據(jù)中心超級(jí)芯片在 AI 推理性能上比上一代提升了 30 多倍。
黃仁勛解釋說(shuō),通過(guò)同時(shí)在架構(gòu)、芯片、系統(tǒng)、程序庫(kù)和算法等各個(gè)層面創(chuàng)新,就能突破摩爾定律的限制。
在許多人質(zhì)疑 AI 發(fā)展是否已經(jīng)停滯的時(shí)候,Nvidia CEO 做出了這一大膽宣稱。Google、OpenAI 和 Anthropic 等頂尖 AI 實(shí)驗(yàn)室都在使用 Nvidia 的 AI 芯片來(lái)訓(xùn)練和運(yùn)行他們的模型,芯片性能的提升很可能帶來(lái) AI 能力的進(jìn)一步突破。
這不是黃仁勛第一次表示 Nvidia 超越摩爾定律。他在 11 月的一期播客中就提到,AI 領(lǐng)域正在經(jīng)歷"超級(jí)摩爾定律"式的發(fā)展。
他反駁了 AI 進(jìn)展放緩的說(shuō)法,并指出目前存在三個(gè) AI 發(fā)展定律:預(yù)訓(xùn)練 (從海量數(shù)據(jù)中學(xué)習(xí)模式)、后訓(xùn)練 (通過(guò)人類反饋等方式微調(diào)) 和測(cè)試時(shí)計(jì)算 (給予 AI 更多"思考"時(shí)間)。
黃仁勛表示,就像摩爾定律通過(guò)降低計(jì)算成本推動(dòng)了計(jì)算技術(shù)的發(fā)展,提升 AI 推理性能也將降低其使用成本。
雖然 Nvidia 的 H100 曾是科技公司訓(xùn)練 AI 模型的首選芯片,但隨著這些公司轉(zhuǎn)向關(guān)注推理階段,一些人開始質(zhì)疑 Nvidia 昂貴芯片能否繼續(xù)保持優(yōu)勢(shì)。
目前使用測(cè)試時(shí)計(jì)算的 AI 模型運(yùn)行成本很高。以 OpenAI 的 o3 模型為例,它在通用智能測(cè)試中達(dá)到人類水平的表現(xiàn),但每個(gè)任務(wù)就要花費(fèi)近 20 美元,而ChatGPT Plus 訂閱費(fèi)為一個(gè)月 20 美元。
在周一的主題演講中,黃仁勛展示了最新的數(shù)據(jù)中心超級(jí)芯片 GB200 NVL72。這款芯片在 AI 推理性能上比此前最暢銷的 H100 提升了 30-40 倍。他表示,這一性能飛躍將降低像 OpenAI o3 這樣需要大量推理計(jì)算的模型的使用成本。
黃仁勛強(qiáng)調(diào),他們的重點(diǎn)是提升芯片性能,因?yàn)閺拈L(zhǎng)遠(yuǎn)來(lái)看,更強(qiáng)的性能就意味著更低的價(jià)格。
他表示,提升計(jì)算能力是解決測(cè)試時(shí)計(jì)算在性能和成本方面問題的直接方案。長(zhǎng)期來(lái)看,AI 推理模型還能為預(yù)訓(xùn)練和后訓(xùn)練階段提供更好的數(shù)據(jù)。
在過(guò)去一年中,得益于 Nvidia 等硬件公司的計(jì)算突破,AI 模型的價(jià)格確實(shí)大幅下降。盡管 OpenAI 最新推出的推理模型價(jià)格不菲,但黃仁勛預(yù)計(jì)這一降價(jià)趨勢(shì)仍將持續(xù)。
他還表示,Nvidia 如今的 AI 芯片性能比 10 年前提升了 1,000 倍,這遠(yuǎn)超摩爾定律的發(fā)展速度,而且這種快速發(fā)展的勢(shì)頭還看不到停止的跡象。
1749
收藏

















