長(zhǎng)期以來,人工智能與超級(jí)計(jì)算似乎是兩個(gè)獨(dú)立的領(lǐng)域。然而,隨著大模型訓(xùn)練對(duì)算力需求的指數(shù)級(jí)增長(zhǎng),二者之間的界限逐漸模糊。并行科技董事長(zhǎng)陳健一針見血地指出:“AI訓(xùn)練的本質(zhì)就是超算,超算也并不僅僅是CPU的超級(jí)計(jì)算機(jī)。超算架構(gòu)、以GPU為核心的算力平臺(tái)成為大模型訓(xùn)練的必備基礎(chǔ)設(shè)施!
Meta宣布了兩個(gè)新的24K H100 GPU集群,用于訓(xùn)練大模型Llama-3,預(yù)計(jì)4月末或5月中旬上線。集群使用RoCEv2網(wǎng)絡(luò)和基于Tectonic/Hammerspace的存儲(chǔ)解決方案,支持PyTorch。
浪潮信息以全球領(lǐng)先的AI模型“源”為智能引擎,依托InService智能服務(wù)平臺(tái),構(gòu)建了“智能客服大腦”,具備超強(qiáng)的語言理解、數(shù)據(jù)分析、自主學(xué)習(xí)和智能推理能力。