獼猴竟是“吃豆人”游戲高手?中科院腦智卓越中心發(fā)表最新研究成果
獼猴會(huì)玩游戲嗎?實(shí)驗(yàn)證明它們可以成為“吃豆人”高手!《eLife》日前在線發(fā)表了題為《獼猴在吃豆人游戲中的分層組合策略》的研究論文。該研究由中國科學(xué)院腦科學(xué)與智能技術(shù)卓越創(chuàng)新中心(神經(jīng)科學(xué)研究所)、靈長類神經(jīng)生物學(xué)國家重點(diǎn)實(shí)驗(yàn)室楊天明研究組完成。
這項(xiàng)研究設(shè)計(jì)了一種新穎有趣的實(shí)驗(yàn)范式——吃豆人游戲,并且訓(xùn)練獼猴學(xué)會(huì)使用搖桿完成該游戲范式的主要任務(wù)。該研究將復(fù)雜的行為范式和人工智能建模結(jié)合,定量研究了獼猴解決復(fù)雜問題的啟發(fā)式行為策略特點(diǎn),為理解大腦實(shí)現(xiàn)高級(jí)認(rèn)知功能的計(jì)算機(jī)制提供了全新方法和重要啟發(fā)。
日常生活中,人們大部分的重要目標(biāo)通常超出了簡單決策的實(shí)現(xiàn)范疇,然而,這些目標(biāo)可以通過設(shè)計(jì)一系列縝密的基礎(chǔ)策略組合來實(shí)現(xiàn)。個(gè)體可以根據(jù)當(dāng)前的情況優(yōu)先考慮每一種策略的收益和風(fēng)險(xiǎn),并在較容易完成的子任務(wù)中具體問題具體分析。高度動(dòng)態(tài)變化的環(huán)境會(huì)時(shí)刻伴隨著出乎意料的意外和干擾,因此保持相機(jī)而變的靈活性也在決策過程中至關(guān)重要。盡管研究動(dòng)物的復(fù)雜行為和潛在的神經(jīng)機(jī)制在神經(jīng)科學(xué)和認(rèn)知科學(xué)領(lǐng)域是一個(gè)持續(xù)受到關(guān)注的科學(xué)問題,但大部分的動(dòng)物行為范式復(fù)雜程度,都不足以支持研究動(dòng)物如何簡化動(dòng)態(tài)多樣的策略以完成復(fù)雜的高級(jí)認(rèn)知任務(wù)。
為解決這些問題,該研究改編經(jīng)典街機(jī)游戲吃豆人,并訓(xùn)練獼猴學(xué)會(huì)使用操縱桿來控制吃豆人在一個(gè)封閉的迷宮中運(yùn)動(dòng)收集食物,獼猴避開敵人追擊將獲得實(shí)時(shí)果汁作為獎(jiǎng)勵(lì)。在經(jīng)過一段時(shí)間的訓(xùn)練后,獼猴能夠理解游戲中各個(gè)元素和獎(jiǎng)勵(lì)懲罰之前的關(guān)聯(lián),并依次相應(yīng)地做出連續(xù)的運(yùn)動(dòng)抉擇,來躲避敵人的追擊,獲取更多的獎(jiǎng)勵(lì),甚至在特定規(guī)則下對敵人實(shí)現(xiàn)反殺。雖然該游戲高度動(dòng)態(tài)且元素復(fù)雜,但本質(zhì)上它比較類似一個(gè)動(dòng)物野外覓食任務(wù),這也可能是該研究成功訓(xùn)練動(dòng)物的關(guān)鍵要素。
為定量地描述獼猴行為策略的特點(diǎn),研究人員利用機(jī)器學(xué)習(xí)和統(tǒng)計(jì)方法,動(dòng)態(tài)擬合匹配游戲玩法與多個(gè)智能策略模型。這種多智能體協(xié)作決策模型也是人工智能領(lǐng)域?qū)崿F(xiàn)吃豆人游戲最高分?jǐn)?shù)的設(shè)計(jì)關(guān)鍵。該計(jì)算模型首先設(shè)計(jì)了一組策略基組,策略基組中每個(gè)策略都只解決游戲中一個(gè)子任務(wù),例如覓食最近的食物、躲避敵人追擊或者通過能量豆食物改變敵人的狀態(tài),其次,該模型將不同的策略基組對比擬合到到獼猴的游戲行為數(shù)據(jù)中,推斷策略的動(dòng)態(tài)權(quán)重。該計(jì)算模型對獼猴手柄運(yùn)動(dòng)的預(yù)測準(zhǔn)確率能夠達(dá)到90%以上。
更重要的是,通過策略動(dòng)態(tài)權(quán)重的分析,發(fā)現(xiàn)獼猴通過使用分而治之的啟發(fā)式方法,在每個(gè)時(shí)間只關(guān)注游戲的一個(gè)子任務(wù),分布式地解決這些問題,從而實(shí)現(xiàn)對游戲總體目標(biāo)的優(yōu)化。更令人感到吃驚的是,研究發(fā)現(xiàn)獼猴能夠在時(shí)序上組合這些策略基組,構(gòu)建更為復(fù)雜的復(fù)合策略,來處理特定的更有挑戰(zhàn)性的任務(wù)。以上的研究結(jié)果表明,獼猴能夠優(yōu)化掌握一套策略基組,并采用分層決策的方式來解決十分復(fù)雜的任務(wù)。
本研究著眼于系統(tǒng)認(rèn)知神經(jīng)科學(xué)和人工智能廣泛關(guān)注的交叉領(lǐng)域,將復(fù)雜的行為范式和嚴(yán)謹(jǐn)?shù)挠?jì)算建模進(jìn)行結(jié)合,為未來研究靈長類動(dòng)物的高級(jí)認(rèn)知提供了重要的實(shí)驗(yàn)證據(jù)和新穎的分析方法。
該研究由博士后楊千里、林中喬,博士生張文怡、陳希源,以及工作人員李建澍和張嘉琦在楊天明研究員的指導(dǎo)下完成,研究組的其他成員也在課題的各個(gè)階段給予了幫助。該工作得到科技部、中科院、上海市科委和基金委的資助。
關(guān)鍵詞: 研究成果
相關(guān)閱讀
-
中超第19輪的補(bǔ)賽開打 梅州客家在大連...
昨天下午,中超第19輪的補(bǔ)賽全面開打。北上大連的梅州客家在大連市... -
廣東男籃23分擊敗上海大鯊魚 布魯克斯...
昨晚,CBA常規(guī)賽再戰(zhàn)一輪,廣東男籃以23分的優(yōu)勢擊敗上海大鯊魚隊(duì),... -
全紅嬋首次參加跳水世界杯 207C動(dòng)作得...
昨晚,在德國柏林舉行的跳水世界杯產(chǎn)生了首枚金牌。在女子雙人十米... -
李瑋鋒出任廣州城主帥 廣州城才逐漸走...
在結(jié)束第21輪0∶0逼平滄州雄獅的比賽之后,廣州城只是稍作休整,在1... -
《和平精英》的開放世界 全局開放商業(yè)想象
未來30年,元宇宙將是中國的支柱產(chǎn)業(yè),至少有12億人可以成為元宇宙... -
如何打破銀行場景金融轉(zhuǎn)型焦慮 百融云...
身處數(shù)字經(jīng)濟(jì)時(shí)代,用戶對于千人千面、實(shí)時(shí)響應(yīng)、場景化的訴求日益... -
泰隆銀行突破柜臺(tái)窗口式政務(wù)服務(wù)定式思...
日前,紹興市柯橋區(qū)外貿(mào)共享客廳在泰隆銀行紹興分行揭牌成立,在全... -
世界快資訊丨固定資產(chǎn)投資增速加快 投...
相關(guān)閱讀:消費(fèi)市場逐步恢復(fù)新型消費(fèi)增勢良好政策措施加力顯效工業(yè)... -
四部門:部署開展涉企違規(guī)收費(fèi)專項(xiàng)整治...
人民網(wǎng)北京10月27日電(記者孫博洋)記者從市場監(jiān)管總局了解到,日... -
臺(tái)州銀行投向小微企業(yè)與“三農(nóng)”客戶的...
臺(tái)州銀行溫州分行成立12年來,與小微企業(yè)和三農(nóng)交貼心的朋友,累計(jì)... -
精彩看點(diǎn):智通A股融資融券統(tǒng)計(jì)|10月27日
智通A股融資融券統(tǒng)計(jì)|10月27日 -
進(jìn)出口銀行浙江省分行:21.5億元紅獅印...
由進(jìn)出口銀行浙江省分行牽頭的等值21 5億元人民幣紅獅印尼東加銀團(tuán)... -
浙商銀行投放人行設(shè)備更新改造再貸款清...
近期,浙商銀行落實(shí)設(shè)備更新改造再貸款和制造業(yè)中長期貸款投放的相... -
紹興市成立科學(xué)家研究中心 打造弘揚(yáng)科...
日前,紹興市科學(xué)家精神研究中心揭牌成立儀式在紹興文理學(xué)院舉行。... -
浙江省科協(xié)科普部組織浙江農(nóng)林大學(xué)5位博...
日前,浙江省科協(xié)科普部組織浙江農(nóng)林大學(xué)5位博士科技志愿者,響應(yīng)智... -
鹿城區(qū)科協(xié)持續(xù)舉辦項(xiàng)目路演活動(dòng) 吸引...
近日,為加速推動(dòng)科技成果轉(zhuǎn)化,促進(jìn)產(chǎn)業(yè)高質(zhì)量發(fā)展,服務(wù)國家創(chuàng)新... -
孫宇晨2022釜山區(qū)塊鏈周演講:區(qū)塊鏈?zhǔn)?..
據(jù)韓國媒體全球經(jīng)濟(jì)新聞10月27日報(bào)道,波場TRON創(chuàng)始人孫宇晨線上出... -
世界即時(shí)看!挺進(jìn)深地挖掘油氣潛能(新知)
【現(xiàn)象】今年6月,西南油氣田雙魚001—H6井鉆井深度達(dá)9010米,創(chuàng)造... -
三季度就業(yè)形勢總體穩(wěn)定
核心閱讀 人社部日前發(fā)布的三季度就業(yè)數(shù)據(jù)顯示:就業(yè)形勢總體穩(wěn)... -
為村民鋪就“幸福路”(新視點(diǎn))
金秋時(shí)節(jié),來到河北省邯鄲市峰峰礦區(qū)彭城鎮(zhèn)藺家莊村,桃園里的桃子...