2016年，一臺(tái)超級(jí)計(jì)算機(jī)在復(fù)雜的棋盤(pán)游戲Go中擊敗了世界冠軍。怎么樣？通過(guò)使用強(qiáng)化學(xué)習(xí)，這是一種人工智能，計(jì)算機(jī)可以通過(guò)簡(jiǎn)單的指令對(duì)其進(jìn)行編程后進(jìn)行自我訓(xùn)練。計(jì)算機(jī)從錯(cuò)誤中吸取教訓(xùn)，并逐步變得強(qiáng)大。

強(qiáng)化學(xué)習(xí)的主要缺點(diǎn)是它不能在某些實(shí)際應(yīng)用中使用。那是因?yàn)樵谧晕矣?xùn)練的過(guò)程中，計(jì)算機(jī)最初會(huì)嘗試幾乎所有事物，然后最終跌入正確的道路。對(duì)于某些應(yīng)用程序（例如不允許容忍突然的溫度波動(dòng)的氣候控制系統(tǒng)），此初始試錯(cuò)階段可能會(huì)出現(xiàn)問(wèn)題。

CSEM工程師已經(jīng)開(kāi)發(fā)出一種解決此問(wèn)題的方法。他們表明，計(jì)算機(jī)可以首先在極為簡(jiǎn)化的理論模型上進(jìn)行訓(xùn)練，然后再設(shè)置為在實(shí)際系統(tǒng)上學(xué)習(xí)。這意味著，當(dāng)計(jì)算機(jī)在現(xiàn)實(shí)生活中的系統(tǒng)上開(kāi)始機(jī)器學(xué)習(xí)過(guò)程時(shí)，它們可以借鑒先前在模型上學(xué)到的知識(shí)。因此，計(jì)算機(jī)可以快速走上正確的道路，而無(wú)需經(jīng)歷一段時(shí)間的劇烈波動(dòng)。工程師的研究成果剛剛發(fā)表在關(guān)于神經(jīng)網(wǎng)絡(luò)和學(xué)習(xí)系統(tǒng)的IEEE Transactions中。

CSEM智能能源系統(tǒng)研究負(fù)責(zé)人，該研究的合著者Pierre-Jean Alet說(shuō)：“這就像在開(kāi)車(chē)前學(xué)習(xí)駕駛員手冊(cè)一樣?！薄巴ㄟ^(guò)這一預(yù)培訓(xùn)步驟，計(jì)算機(jī)可以建立一個(gè)可以利用的知識(shí)庫(kù)，從而在尋找正確答案時(shí)不會(huì)出現(xiàn)盲目情況。”

工程師使用三步過(guò)程在復(fù)雜的100個(gè)房間的建筑物中的加熱，通風(fēng)和空調(diào)（HVAC）系統(tǒng)上測(cè)試了他們的方法。首先，他們使用簡(jiǎn)單描述了建筑物行為的簡(jiǎn)單方程式對(duì)“虛擬模型”進(jìn)行了計(jì)算機(jī)培訓(xùn)。然后他們將實(shí)際的建筑物數(shù)據(jù)（溫度，百葉窗打開(kāi)的時(shí)間，天氣狀況等）輸入計(jì)算機(jī)，以使培訓(xùn)更加準(zhǔn)確。最后，他們讓計(jì)算機(jī)運(yùn)行其強(qiáng)化學(xué)習(xí)算法，以找到管理HVAC系統(tǒng)的最佳方法。廣泛的應(yīng)用

這一發(fā)現(xiàn)可以通過(guò)將機(jī)器學(xué)習(xí)的使用范圍擴(kuò)大到運(yùn)行參數(shù)的巨大波動(dòng)會(huì)帶來(lái)重大財(cái)務(wù)或安全成本的應(yīng)用，從而為機(jī)器學(xué)習(xí)開(kāi)辟新的視野。

責(zé)任編輯：lq