當前位置:首頁 > 今日熱點 > 熱點追蹤 > 正文

    英偉達發布新人工智能芯片,黃仁勛:大模型運行成本將大幅降低

    2023-08-09 05:50:52    來源:騰訊網    

    騰訊科技訊 8月9日,英偉達宣布推出一款新芯片,旨在在人工智能硬件領域抵御競爭對手,包括AMD、谷歌和亞馬遜。

    據估計,目前英偉達在AI芯片市場占據了超過80%的市場份額。該公司的專長是圖形處理單元(GPU),已成為支撐生成式人工智能軟件(如谷歌的Bard和OpenAI的ChatGPT)的大型AI模型的首選芯片。但由于科技巨頭、云服務提供商和初創企業爭奪GPU容量來開發自己的AI模型,英偉達的芯片供應短缺。


    (相關資料圖)

    英偉達最新發布的芯片GH200,與該公司目前最高端的AI芯片H100采用相同的GPU。但GH200還配備了141GB的尖端內存和一個72核的ARM中央處理器。

    英偉達CEO黃仁勛在周二的演講中表示:“我們給這個處理器加了一些提升。”他補充說:“這個處理器是為全球數據中心的規模而設計的。”

    據黃仁勛透露,這款新芯片將于明年第二季度在英偉達的經銷商處上市,并計劃在年底前提供樣品。英偉達的代表拒絕透露價格。

    通常,處理AI模型的過程至少分為兩個部分:訓練和推理。

    首先,使用大量數據對模型進行訓練,這個過程可能需要數月時間,有時需要數千個GPU,例如英偉達的H100和A100芯片。

    然后,該模型將在軟件中用于進行預測或生成內容,這個過程稱為推理。與訓練類似,推理需要大量的計算資源,并且每次軟件運行時都需要大量的處理能力,例如生成文本或圖像時。但與訓練不同,推理是幾乎持續進行的,而訓練只在需要更新模型時才需要進行。

    黃仁勛表示:“你可以將幾乎任何大型語言模型放入其中,它將進行瘋狂的推理。大型語言模型的推理成本將大幅降低。”

    英偉達的新芯片GH200專為推理而設計,因為它具有更大的內存容量,可以容納更大的AI模型在單個系統中。英偉達副總裁伊恩·巴克在與分析師和記者的電話會議上表示,英偉達的H100具有80GB的內存,而新的GH200則有141GB的內存。英偉達還宣布推出了一種將兩個GH200芯片組合到一臺計算機中的系統,以支持更大的模型。

    巴克表示:“更大的內存使得模型可以常駐在單個GPU上,而不需要多個系統或多個GPU來運行。”

    此次宣布正值英偉達的主要GPU競爭對手AMD推出面向AI的芯片MI300X,該芯片支持192GB的內存,并被市場推廣為適用于AI推理。谷歌和亞馬遜等公司也正在設計自己的定制AI芯片用于推理。

    審校:小北

    關鍵詞:

    上一篇:道教學院火了,報錄比接近21:1,難度不亞于考研“上岸”
    下一篇:最后一頁

    亚洲熟妇av午夜无码不卡| 亚洲精品日韩中文字幕久久久| 亚洲美女人黄网成人女| 日韩va亚洲va欧洲va国产| 亚洲精品线路一在线观看 | 亚洲色大成网站www| 国产精品亚洲精品青青青| 亚洲另类小说图片| 亚洲中字慕日产2021| 亚洲va成无码人在线观看| 最新国产成人亚洲精品影院| 亚洲日韩国产精品乱-久| 一本色道久久综合亚洲精品蜜桃冫| 亚洲小说图片视频| 亚洲videos| 亚洲精品第一国产综合亚AV| 亚洲爆乳AAA无码专区| 国产精品亚洲а∨天堂2021| 亚洲av中文无码| 久久亚洲国产成人影院网站 | 亚洲一区二区三区亚瑟| 亚洲乱码一区二区三区国产精品| 亚洲中文字幕无码中文| 亚洲国产精品日韩av不卡在线| 色窝窝亚洲AV网在线观看| 亚洲精品尤物yw在线影院| 国产综合亚洲专区在线| 亚洲爆乳无码专区| 亚洲黄色免费在线观看| 亚洲乱码在线播放| 亚洲欧美黑人猛交群| 日韩精品成人亚洲专区| 三上悠亚亚洲一区高清| 亚洲Av综合色区无码专区桃色| 久久久久亚洲Av无码专| 亚洲jizzjizz在线播放久| 亚洲国产一区二区三区在线观看 | 亚洲AV无码国产精品麻豆天美| 亚洲香蕉免费有线视频| 亚洲综合成人婷婷五月网址| 国产精品亚洲专区无码WEB|