華為AI訓(xùn)練集群什么情況 華為AI訓(xùn)練集群是什么

9月18日，華為全聯(lián)接2019（HUAWEI CONNECT）大會(huì)上，華為副董事長(zhǎng)胡厚崑發(fā)布了Atlas 900 AI訓(xùn)練集群。

華為副董事長(zhǎng)胡厚崑表示，這款產(chǎn)品匯聚了華為幾十年的技術(shù)沉淀，是當(dāng)前全球最快的AI訓(xùn)練集群，由數(shù)千顆昇騰處理器組成。

在衡量AI計(jì)算能力的金標(biāo)準(zhǔn)ResNet-50模型訓(xùn)練中，Atlas 900只用了59.8秒就完成了訓(xùn)練，這比原來(lái)的世界記錄還快了10秒。這是什么概念？相當(dāng)于短跑冠軍跑完終點(diǎn)，喝完一瓶水才等到第二名。

胡厚崑稱(chēng)，我們相信Atlas 900的強(qiáng)大算力，可廣泛應(yīng)用于科學(xué)研究和商業(yè)創(chuàng)新。比如天文探索、石油勘探等領(lǐng)域，都需要進(jìn)行龐大的數(shù)據(jù)計(jì)算和處理，原來(lái)可能花費(fèi)好幾個(gè)月的工作，現(xiàn)在交給Atlas 900，就是幾秒鐘的事情。

在大型數(shù)據(jù)集上進(jìn)行訓(xùn)練的神經(jīng)網(wǎng)絡(luò)架構(gòu)涵蓋從圖像識(shí)別、自然語(yǔ)言處理、視頻實(shí)時(shí)分析和智能推薦系統(tǒng)等各個(gè)方面，訓(xùn)練這些神經(jīng)網(wǎng)絡(luò)模型需要大量浮點(diǎn)計(jì)算能力。

近年來(lái)單個(gè)AI處理器算力和訓(xùn)練方法上均取得了重大進(jìn)步，但是在單一機(jī)器上，AI訓(xùn)練所需要的時(shí)間仍然長(zhǎng)得不切實(shí)際，因此需要借助大規(guī)模分布式AI集群環(huán)境來(lái)提升神經(jīng)網(wǎng)絡(luò)訓(xùn)練系統(tǒng)的浮點(diǎn)計(jì)算能力。

此次發(fā)布的Atlas 900 AI訓(xùn)練集群由數(shù)千顆昇騰910 AI處理器互聯(lián)構(gòu)成，是當(dāng)前全球最快的AI訓(xùn)練集群，代表了當(dāng)今全球的算力巔峰。其總算力達(dá)到256P～1024P FLOPS @FP16，相當(dāng)于50萬(wàn)臺(tái)PC的計(jì)算能力。

據(jù)了解，Atlas 900 AI訓(xùn)練集群采用業(yè)界單芯片算力最強(qiáng)的昇騰910 AI處理器，每顆昇騰910 AI處理器內(nèi)置32個(gè)達(dá)芬奇AI Core，單芯片提供比業(yè)界高一倍的算力（256TFLOPS@FP16）。

華為已在華為云上部署了一個(gè)Atlas 900 AI訓(xùn)練集群，集群規(guī)模為1024顆昇騰910 AI處理器。基于當(dāng)前最典型的ResNet-50 v1.5模型”和“ ImageNet-1k數(shù)據(jù)集”，Atlas 900AI訓(xùn)練集群只需59.8秒就可完成訓(xùn)練，排名全球第一。

華為AI訓(xùn)練集群

“ ImageNet-1k數(shù)據(jù)集”包含128萬(wàn)張圖片，精度為75.9%，在同等精度下，其他兩家業(yè)界主流廠(chǎng)家測(cè)試成績(jī)分別是70.2s和76.8s，Atlas 900 AI訓(xùn)練集群比第2名快15%。

據(jù)了解，Atlas 900 AI集群主要為大型數(shù)據(jù)集神經(jīng)網(wǎng)絡(luò)訓(xùn)練提供超強(qiáng)算力，可廣泛應(yīng)用于科學(xué)研究與商業(yè)創(chuàng)新，讓研究人員更快地進(jìn)行圖像、視頻和語(yǔ)音等AI模型訓(xùn)練，讓人類(lèi)更高效地探索宇宙奧秘、預(yù)測(cè)天氣、勘探石油和加速自動(dòng)駕駛的商用進(jìn)程。

Atlas 900 AI集群也可以提供云服務(wù)，以云的方式提供充裕的、經(jīng)濟(jì)的算力資源，簡(jiǎn)單易用、高效率、全流程的AI平臺(tái)，為客戶(hù)帶來(lái)極致體驗(yàn)的“易獲取、用得起、方便用”的普惠AI算力。