我的智商,隨年歲暴漲_第103章 超算升級(1)

作者:愛吃醬油的狸花貓·2個月前

十一月中旬,華興一號的訓練遇到了新的瓶頸。

不是模型架構的問題,而是算力不夠。

林華興看著螢幕上緩慢下降的損失函式曲線,眉頭鎖。過去兩週,損失值只從0.11降到了0.098,下降速度比之前慢了一個數量級。不是模型學不了,而是訓練資料規模擴大後,家裡那十臺伺服的算力已經跟不上需求了。

他在大腦裡快速估算了一下。要完下一大規模訓練,至需要將現有算力提升五倍。五倍,意味著要增加幾十臺伺服,總功率會翻幾番,家裡的電路和散熱都扛不住。

得換個思路。

林華興想起了燕大的高效能計算中心。那裡有曙5000A和天河一號的節點,雖然比不上國家級超算中心,但用來跑華興一號的訓練綽綽有餘。之前陳建國院長給他開了賬號,他一直沒用,因為公共資源不適合長期跑大規模任務。

但現在況不同了。王教授的課題組有專用的計算資源配額,他可以以課題組的名義申請使用。

第二天,林華興去找王教授,把自己的需求說了一遍。王教授聽完,二話不說,給計算中心打了個電話。

IA

BT02UPG4.UPC001

調

猜你喜歡

同題材或同分類的其他作品,僅供參考。