當前位置:首頁 > 今日熱點 > 熱點追蹤 > 正文

    英偉達發布新人工智能芯片,黃仁勛:大模型運行成本將大幅降低

    2023-08-09 05:50:52    來源:騰訊網    

    騰訊科技訊 8月9日,英偉達宣布推出一款新芯片,旨在在人工智能硬件領域抵御競爭對手,包括AMD、谷歌和亞馬遜。

    據估計,目前英偉達在AI芯片市場占據了超過80%的市場份額。該公司的專長是圖形處理單元(GPU),已成為支撐生成式人工智能軟件(如谷歌的Bard和OpenAI的ChatGPT)的大型AI模型的首選芯片。但由于科技巨頭、云服務提供商和初創企業爭奪GPU容量來開發自己的AI模型,英偉達的芯片供應短缺。


    (相關資料圖)

    英偉達最新發布的芯片GH200,與該公司目前最高端的AI芯片H100采用相同的GPU。但GH200還配備了141GB的尖端內存和一個72核的ARM中央處理器。

    英偉達CEO黃仁勛在周二的演講中表示:“我們給這個處理器加了一些提升。”他補充說:“這個處理器是為全球數據中心的規模而設計的。”

    據黃仁勛透露,這款新芯片將于明年第二季度在英偉達的經銷商處上市,并計劃在年底前提供樣品。英偉達的代表拒絕透露價格。

    通常,處理AI模型的過程至少分為兩個部分:訓練和推理。

    首先,使用大量數據對模型進行訓練,這個過程可能需要數月時間,有時需要數千個GPU,例如英偉達的H100和A100芯片。

    然后,該模型將在軟件中用于進行預測或生成內容,這個過程稱為推理。與訓練類似,推理需要大量的計算資源,并且每次軟件運行時都需要大量的處理能力,例如生成文本或圖像時。但與訓練不同,推理是幾乎持續進行的,而訓練只在需要更新模型時才需要進行。

    黃仁勛表示:“你可以將幾乎任何大型語言模型放入其中,它將進行瘋狂的推理。大型語言模型的推理成本將大幅降低。”

    英偉達的新芯片GH200專為推理而設計,因為它具有更大的內存容量,可以容納更大的AI模型在單個系統中。英偉達副總裁伊恩·巴克在與分析師和記者的電話會議上表示,英偉達的H100具有80GB的內存,而新的GH200則有141GB的內存。英偉達還宣布推出了一種將兩個GH200芯片組合到一臺計算機中的系統,以支持更大的模型。

    巴克表示:“更大的內存使得模型可以常駐在單個GPU上,而不需要多個系統或多個GPU來運行。”

    此次宣布正值英偉達的主要GPU競爭對手AMD推出面向AI的芯片MI300X,該芯片支持192GB的內存,并被市場推廣為適用于AI推理。谷歌和亞馬遜等公司也正在設計自己的定制AI芯片用于推理。

    審校:小北

    關鍵詞:

    上一篇:道教學院火了,報錄比接近21:1,難度不亞于考研“上岸”
    下一篇:最后一頁

    久久久亚洲精品蜜桃臀| 亚洲乱码中文论理电影| 亚洲国产精品美女久久久久| 亚洲AV色吊丝无码| 亚洲国产精品无码久久久| 亚洲天堂视频在线观看| 久久亚洲精品成人777大小说| 亚洲色爱图小说专区| 亚洲欧洲成人精品香蕉网| 国产亚洲成人久久| 中文字幕在线亚洲精品| 国产国拍精品亚洲AV片| 国产亚洲精品岁国产微拍精品| 亚洲精品白浆高清久久久久久 | 国产AV无码专区亚洲AV男同| 亚洲精品美女久久777777| 亚洲AV无码久久| 久久精品国产亚洲AV大全| 亚洲精品乱码久久久久久下载| 亚洲国产午夜精品理论片| 亚洲最大福利视频| 亚洲AV无码一区二区三区久久精品| 国产综合激情在线亚洲第一页 | 久久久久亚洲精品无码蜜桃| 亚洲理论片在线中文字幕| 亚洲乱码卡一卡二卡三| 亚洲精品无码久久久久牙蜜区| 理论亚洲区美一区二区三区| 亚洲国产精品综合久久一线| 中文字幕不卡亚洲| 亚洲AV无码精品无码麻豆| 亚洲美女色在线欧洲美女| 国产成人精品日本亚洲18图| 亚洲爆乳AAA无码专区| 亚洲成年人啊啊aa在线观看| 亚洲日韩精品射精日| 亚洲国产天堂在线观看| 亚洲另类春色校园小说| 亚洲AV永久无码精品一福利 | 亚洲国产成人久久综合区| 亚洲色无码专区在线观看|