AMD首度公布MLPerf測試結果 展現全新AI領先地位

jcatcj 09月 03,2024

AMD表示,MLPerf有多種基準測試類型,包括MLPerf Inference: Datacenter、MLPerf Training以及於2024年推出的尖端大型生成式人工智慧(AI)語言模型Llama 2 70B。AMD選擇了受歡迎且具有重要意義的大型語言模型(LLM)Llama 2 70B進行首次MLPerf基準測試。

AMD指出,在MLPerf Inference v4.1(MLPerf 4.1推論)中為Llama 2 70B提出3項成果,包括:

展示出市場上最適合用於AI任務的AMD CPU和GPU組合;MI300X擁有192GB的大容量記憶體,讓單一MI300X GPU可執行整個Llama 2 70B模型,而大多數競爭對手的GPU則需要將該模型拆分至多個加速器上執行;AMD新一代CPU如何提升AI任務的效能。

根據MLCommons網站資料以及AMD部落格文章指出,在CPU和GPU組合,搭載8個AMD Instinct MI300X加速器和2個AMD EPYC 9374F(Genoa) ,在伺服器和離線兩種情境下,使用 FP8 精度時,與輝達的 DGX H100和 2 個 AMD EPYC 9374F(Genoa)CPU 的組合,在FP8精度的伺服器和離線場景中,其效能表現與搭載NVIDIA DGX H100和第4代Intel Xeon CPU 的組合相差僅2~3%。

AMD MLPerf 測試 MI300X

點擊閱讀下一則新聞
街口支付推「街頭 10% 回饋祭」 對街口TWQR店家推0手續費


鄭重聲明:本文版權歸原作者所有,轉載文章僅為傳播信息之目的,不構成任何投資建議,如有侵權行為,請第一時間聯絡我們修改或刪除,多謝。


標題:AMD首度公布MLPerf測試結果 展現全新AI領先地位

地址:https://www.twnewsletter.com/article/49136.html

相關文章
精選資訊
  • 財經輪股堂|定製不同風險偏好投資策略
  • 財富焦點論壇︱互聯網經濟對經濟增長影響
  • 大砍蘋果13%持股!股神巴菲特解釋原因 擁6兆現金創新高
  • Threads看不到留言?一鍵找回精彩留言
  • 85度C董娘出清全部3463張持股 美食-KY證實「已賣完」曝原因
  • 狂飆論股社| 韓國公司債券收益率飆升
  • 鴻海旗下鴻騰精密注資新加坡子公司122億 因應海外擴張計畫