高通Cloud AI 100、AMD EPYC™ 7003系列處理器和技嘉服務(wù)器解決方案共同推動AI推理突破每秒千萬億次運算

2021-03-17 16:21

AI無疑已經(jīng)成為推動下一代用戶體驗的驅(qū)動力。無論是快速瀏覽喜愛的社交應(yīng)用，還是基于數(shù)萬次AI推理提供的在線購物推薦，幾乎每一項移動終端體驗都與AI密不可分。目前，這些平臺每天承載著數(shù)百萬的用戶量，這又意味著什么呢？它們需要海量性能出眾的高密度服務(wù)器，來提供滿足上述平臺持續(xù)運行所需的AI推理性能。

目前，通過與AMD最新的EPYC^™ 7003系列處理器和技嘉科技的最新G292－Z43服務(wù)器解決方案相配合，高通技術(shù)公司正助力性能出眾的機架式服務(wù)器滿足高性能需求。上述企業(yè)在硬件技術(shù)專長領(lǐng)域的結(jié)合，帶來了頂級性能并為現(xiàn)代化數(shù)據(jù)中心樹立全新標桿。高通技術(shù)公司尖端的Cloud AI 100能夠與技嘉服務(wù)器系統(tǒng)完美適配，這將推動眾多出色的AI用例在高速數(shù)據(jù)分析、個性化推薦、智慧城市和5G通信等領(lǐng)域的普及。

技嘉G292－Z43服務(wù)器將支持兩臺AMD EPYC^TM 7003系列處理器用于處理負載，以及多個高通Cloud AI 100 PCI－E卡用于支持需要密集計算的應(yīng)用來支持AI推理。高通Cloud AI 100推理加速器支持高達400 TOPS的算力，還擁有突破性的性能功耗比，并且僅通過單個高通Cloud AI 100 PCI－E卡即可實現(xiàn)。試想一下，如果每臺技嘉服務(wù)器最多可搭載16個高通Cloud AI 100 PCI－E推理卡，即可提供高達每秒6．4千萬億次運算（400 TOPS x 16，1 POPS等于1000 TOPS）。這是首次基于高通技術(shù)公司AI技術(shù)的解決方案突破每秒千萬億次運算（POPS）大關(guān)。更值得注意的是，每個服務(wù)器機柜可管理超過19個上述服務(wù)器單元，從而輕松實現(xiàn)超過100 POPS的算力，這充分體現(xiàn)了高通技術(shù)公司在AI領(lǐng)域的強勁實力。欲了解相關(guān)參數(shù)，請參考以下信息圖。

更具體來看，單個算力為400 TOPS的HHHL（半高，半長）高通Cloud AI 100 PCI－E推理卡每秒可以支持19，000張圖像進行Resnet50模型分類推理，相當于一臺服務(wù)器機柜每秒可處理超過600萬張圖像。如此強大的AI性能有望在全球市場增強并規(guī)模化擴展AI體驗。我們衷心感謝AMD和技嘉科技為實現(xiàn)這一驚人成就所付出的努力。

高通Cloud AI 100 PCI－E卡和搭載AMD EPYC^TM 7003系列處理器的技嘉服務(wù)器即將面市，請參考文末產(chǎn)品圖獲取更多信息。