omniture

生態(tài)伙伴實測浪潮NF5488A5,AI訓練推理性能大幅提升

2020-12-23 17:52 6094
近日,在GTC China元腦生態(tài)技術(shù)論壇上,中科極限元、趨動科技、睿沿科技等元腦生態(tài)伙伴分享了多個場景下浪潮AI服務器NF5488A5的實測數(shù)據(jù),結(jié)果表明浪潮NF5488A5大幅提升了智能語音、圖像識別等AI模型的訓練和推理性能。

北京2020年12月23日 /美通社/ -- 近日,在GTC China元腦生態(tài)技術(shù)論壇上,中科極限元、趨動科技、睿沿科技等元腦生態(tài)伙伴分享了多個場景下浪潮AI服務器NF5488A5的實測數(shù)據(jù),結(jié)果表明浪潮NF5488A5大幅提升了智能語音、圖像識別等AI模型的訓練和推理性能,促進了產(chǎn)業(yè)AI解決方案的開發(fā)與應用。


NF5488A5是浪潮自研的新一代AI服務器,在4U空間內(nèi)支持8顆第三代NVLink全互聯(lián)的A100芯片,可為用戶提供高達5 PetaFLOPS的AI計算性能和超高速帶寬,為各類AI應用場景提供強大的計算力支撐。NF5488A5曾屢次打破全球權(quán)威AI測試榜單MLPerf的記錄,基于ImageNet的ResNet50基準測試顯示,NF5488A5完成訓練僅需33.37分鐘,單機性能高居第一;推理性能達到每秒54.9萬張圖片,3倍于去年推理榜單的服務器最好性能。


在本次GTC元腦生態(tài)技術(shù)論壇上,生態(tài)伙伴展示了與浪潮的合作方案并公布了在NF5488A5上的性能實測數(shù)據(jù)。

中科極限元開發(fā)的智能語音交互解決方案在國內(nèi)處于領(lǐng)先水平,廣泛應用于教育、交通、呼叫中心、智能硬件等多個領(lǐng)域,本次在浪潮NF5488A5進行加速。NF5488A5高性能、高帶寬、易部署的特性極大地促進了智能語音模型訓練及線上推理。測試數(shù)據(jù)顯示,在相同準確率下,與原有的系統(tǒng)相比,NF5488A5將模型訓練速度提升了50%,單機最大推理路數(shù)提升88%,推理延遲提升65%。


趨動科技與浪潮聯(lián)合打造了業(yè)內(nèi)領(lǐng)先的一體化GPU資源池化解決方案。本次測試采用TensorFlow框架的Benchmark,測試小模型推理、大模型訓練等多種AI應用場景,驗證趨動科技OrionX AI加速器資源池化方案對浪潮NF5488A5的兼容性和性能。結(jié)果表明,NF5488A5服務器性能優(yōu)異,部署資源池化方案后,本機性能損耗小于1%,對比以往服務器的GPU性能,數(shù)據(jù)提升近50%。


 


睿沿科技推出的高山雨燕工業(yè)視覺平臺是為工業(yè)生產(chǎn)場景構(gòu)建的智能多業(yè)務管理安全生產(chǎn)管理平臺,可實現(xiàn)遠程巡檢、作業(yè)安全監(jiān)管、區(qū)域安防等功能。該平臺在計算層使用了浪潮NF5488A5加速訓練和推理。實測結(jié)果顯示,在圖片視頻分辨率相同的情況下,模型原來的訓練時間為140分鐘,使用NF5488A5之后,訓練時間可縮短到105分鐘,速度提升25%。單機最大推理FPS(每秒傳輸幀數(shù))由20800提高到28000,提升35%。


以上實測數(shù)據(jù)顯示,浪潮NF5488A5可廣泛應用于圖像視頻、語音識別、金融分析、智能客服等典型AI應用場景,幫助AI用戶高效完成AI基礎(chǔ)設施和開發(fā)環(huán)境的構(gòu)建,縮短開發(fā)周期,顯著提升AI開發(fā)和應用效率。

浪潮是全球領(lǐng)先的AI計算領(lǐng)導廠商,其AI服務器在中國的市場份額已連續(xù)三年保持在50%以上。面對產(chǎn)業(yè)AI化的趨勢,浪潮提出元腦生態(tài),將聚集左右手伙伴、浪潮AI資源,以更加優(yōu)質(zhì)的產(chǎn)品技術(shù)能力和整體方案實施能力助力更多用戶實現(xiàn)智能化轉(zhuǎn)型和升級。在元腦生態(tài)中,浪潮將共享AI計算平臺、AI資源平臺和AI算法平臺。目前元腦生態(tài)吸引了200+左右手伙伴參與,孵化出6大行業(yè)100+解決方案。

消息來源:浪潮
China-PRNewsire-300-300.png
全球TMT
微信公眾號“全球TMT”發(fā)布全球互聯(lián)網(wǎng)、科技、媒體、通訊企業(yè)的經(jīng)營動態(tài)、財報信息、企業(yè)并購消息。掃描二維碼,立即訂閱!
collection