工程師花5萬小時訓練AI遊玩《寶可夢》紅版 突破第一道館但走不出月見山
在經歷長達 5 萬小時的訓練與學習後,一位工程師成功讓一套 AI 模組學會如何遊玩《寶可夢:紅版》,創造出能夠自行探索遊戲,組成寶可夢隊伍,並成功擊敗第一道館的演算法。然而,這套 AI 一直到計畫結束時依然無法順利走出前往第二道館的月見山,或學會不要花錢買鯉魚王。即使如此,這項實驗依然讓玩家一窺機器學習技術的運作方式。
根據工程師 Peter Whidden 分享的流程影片,這套 AI 能夠在模擬器上以打破常規的輸入方式與遊戲進行互動,那就是能夠像人類一樣先按下一個操作按鍵後才觀察會發生什麼事。在實驗的開頭,Whidden 設置一段長約兩小時遊戲時間的學習流程,並利用模擬器的加速功能將其縮短到現實時間的 6 分鐘左右。在正式展開後,他更進一步讓 40 個測試情境同步進行。
由於機器演算法在本質上並不在乎「全破」一款遊戲,因此 Whidden 為 AI 演算法設計一套在完成特定目標時能夠獲得獎勵的系統。為了鼓勵 AI 在《寶可夢:紅版》中進行探索,只要能夠在地圖上看到一些之前沒有看過的東西,就能夠獲得獎勵點數。最終 AI 順利從真心鎮出發,穿過常盤森林,來到深灰市挑戰第一道館。
在那之前,AI 還需要更加完善的獎懲系統。在學會看到新事物能夠獲得獎勵後,雖然 AI 會開始不斷向前邁進,但完全不在乎收服寶可夢或進行對戰,而是在遇到野生寶可夢時立刻逃走。因此,Whidden 為獎勵系統加入更多內容,依照 AI 寶可夢隊伍的等級總和給予獎勵,讓它開始有動力去練等和捕捉寶可夢。
只不過在某一次的演算中,AI 走進寶可夢中心時意外開啟 PC,並在其中存放幾隻寶可夢。由於 AI 獲得的獎勵點數是依照隊伍等級總和而定,這個行為導致 AI 獲得的分數瞬間驟降。為了避免重蹈覆轍,AI 在那之後的所有演算中都選擇避開寶可夢中心,完全不敢進去為寶可夢補血,這讓 Whidden 不得不再次插手調整。
這套 AI 演算法最基本的運作方式,其實就是隨機在《寶可夢:紅版》中走動與遊戲進行互動,直到發現能夠以最有效率的方式獲得最多獎勵的路徑,並將經驗保留到下一次的演算中。在挑戰的過程中,AI 都只會使用最基本的攻擊招式撞擊來進行對戰,直到該招式的 PP 用完後才會使用其他選擇。某次演算中,AI 終於發現傑泥龜的泡沫攻擊能夠對小剛的寶可夢造成大量的傷害,最終順利擊敗這位道館館主。
即使 AI 在對於遊戲的理解與邏輯上依然比不上人類,但這場實驗發掘了一些更加深層的細節。根據 Whidden 的發現,AI 在經歷一段時間的演算後就開始固定以看似不尋常的路徑從真心鎮出發,直到遇到第一隻野生寶可夢。然而,這一系列的操作其實能夠保證 AI 能夠一球抓到遇見第一隻寶可夢。也就是說,AI 發現一個 Speedrun 玩家可能要花上好幾年的時間研究才有機會注意到的系統漏洞。
這套 AI 演算法在成功突破第一道館時基本上已經達成了 Whidden 最初設定的目標,但 Whidden 決定要讓 AI 的《寶可夢:紅版》冒險繼續下去,看看目前的獎勵機制到底能讓它走多遠。可惜的是,第一和第二道館之間的月見山對於看到新事物就能加分的 AI 來說實在是太過於容易分心,因此一直到 Whidden 決定讓實驗告一段落前都無法順利抵達華藍市。
除此之外,AI 似乎非常喜歡從鯉魚王大叔手中購買鯉魚王,因為這樣的行為能夠讓 AI 寶可夢隊伍的等級總和立刻多出五等,因此到實驗結束前,AI 在其中 1 萬次的演算中都跑去買了鯉魚王。另外值得注意的是,AI 有一次將抓來的小拉達命名為了「AI」,讓人細思極恐。
參考原文:GamesRadar
寶可夢 更多報導
猜你喜歡
同類好文
台文館「阿龍」抄襲中國繪師...委外廠商蹦世界違反著作權法遭起訴
火力全開!動畫《輝夜姬想讓人告白》片尾白銀圭原畫張數突破天際
日酸民畫「冷炸雞事件」諷兔田佩克拉外出約會 遭COVER求償150萬日圓
VTuber花數萬買斷Live2D模型 竟被以300元價格當公用模型盜賣
推特Grok「比基尼改圖」騷擾亂象頻傳!Coser怒斥:平台助長了這種行為
羅傑、峰哥一起被告!網友被Threads反串帳號激怒 卻決定提告羅傑本人
Coser照片遭用grok改少布料?不雅留言多到申訴不完
日本漫畫家以AI「換比基尼」篡改偶像照片 炎上後致歉並終止STU48合作
神人團隊?Riot Games耍蠢導致全球玩家無法登入《英雄聯盟》
實況主Emiru自曝「只泡澡不淋浴」!網:妳很適合和Asmongold交往
超大型《MINECRAFT》企劃1/5冒險展開!百位VT&實況主 Kson也受邀參加
實況主「蟑螂王」Asmongold終於整理房間!沒發現死老鼠 但找到五份「遠古食物」
Razer揭桌上型AI助理「Project AVA」讓Faker、日本OL「SAO」陪你一整天
熟練得令人心疼...《GTA5》麥可演員又被「假報警」已經和警察變成熟人了
hololive Biboo合作爆紅開發者調整3D臉部追蹤 表情捕捉更加靈動可愛
不是人員出走?雨音計劃承認外包中國工作室 未付尾款害VT模型被售出
LOL/夢迴2022?Faker打積分又被LPL選手戳 戰隊懲處卻輕輕放下
《葬送的芙莉蓮》特展搶先看!複習一比一名場面迎接第二季
LOL/加里歐新造型「神盾機甲」超像自由鋼彈!帥到還沒上架就被吹爆
買到賺到!《巫師3》、《電馭叛客2077》任天堂eShop標錯價 CDPR承認失誤
Steam壓倒性好評《超英派遣中心》賣300萬套!約5%玩家完全不選擇感情線
真的變羽衣「媽媽」?VTuber時雨羽衣發表新神曲〈ウィマーマ・サーガ〉
AI生成日本異世界輕小說獲得大賞!被抓包後遭撤銷出版、漫畫化資格
玩一場少一場!《英雄聯盟》隨機單中:大混戰延期至1/10下午
問題學生也想談戀愛!乙女向《幸運之杖R》吊車尾魔法少女的成長之路
《Minecraft》更新動物寶寶外型 眼睛改為單格像素更可愛
hololive卡牌PV外包商疑似使用AI 官方接獲反應調查中
動畫電影《超時空輝耀姬!》公開新預告!新團體「Black Onyx」留言區瘋狂嚴厲斥責
咖波本來就有「獵奇」元素!與屌面人合作已告吹 網友正反論戰還未結束
蜘蛛人互指?實況主IShowSpeed遇「辛巴威Speed」 盜版只差不會後空翻
火熱排行
畫得太「逼」真?日本專畫大歐派繪師聲稱遭C107主辦方禁賣新刊
買到賺到!《巫師3》、《電馭叛客2077》任天堂eShop標錯價 CDPR承認失誤
太苦了...日本hololive「PM公園民」生活髒亂彷彿活在廢墟
動保團體PETA發《賽馬娘》無聲鈴鹿骨折圖惹議 該圖明確違反二創規範
紳士漫《對常來我家的辣妹為所欲為》揭第五集封面、FANZA推出動畫第三集!
台文館「阿龍」抄襲中國繪師...委外廠商蹦世界違反著作權法遭起訴
《勝利女神:妮姬》愛麗絲繪師再推新作 31歲社畜為錢慘當魔法少女
問VT長怎樣?Ray一行人與Ironmouse互動掀議 Ray批鐵鼠事後亂講話
實況主Shroud讚賞《33號遠征隊》很好玩!親口承認「Asmongold是對的」
火力全開!動畫《輝夜姬想讓人告白》片尾白銀圭原畫張數突破天際
大還要更大!《碧藍航線》專畫大歐派繪師嘆:第一次被官方說畫太小
日酸民畫「冷炸雞事件」諷兔田佩克拉外出約會 遭COVER求償150萬日圓
VTuber花數萬買斷Live2D模型 竟被以300元價格當公用模型盜賣
推特Grok「比基尼改圖」騷擾亂象頻傳!Coser怒斥:平台助長了這種行為
獲得Zeus、Chovy、Keria、Ruler指導!韓高職生奪《英雄聯盟》全國冠軍
紳士名作《NTRaholic》Steam終於上市!扮黃毛巨巨房東奪走新婚人妻的幸福
大到溢出來!《蔚藍檔案》揭五週年視覺圖 調月莉央禮服二創滿天飛
熟練得令人心疼...《GTA5》麥可演員又被「假報警」已經和警察變成熟人了
獨/《活俠傳》虞小梅、郁竹感情線將同步推出!熊承諾玩家不必再等上一年
國王的瑟圖?紳士繪師Hews秀「白色走光圖」反制推特新功能
拒絕當陪跑NPC...《聯盟戰棋》巴黎公開賽「幻滅」奪冠:終於證明自己
羅傑、峰哥一起被告!網友被Threads反串帳號激怒 卻決定提告羅傑本人
大物新人台V幽李鈴初配信同接1.2萬!一出道就爆自己「前世」?
Coser照片遭用grok改少布料?不雅留言多到申訴不完
加藤小夏成PlayStation X 潮牌聯名服飾代言人!貼近實況上自然隨性風格
人妻真香!韓紳士漫《洞洞雜貨店》連載三年151話完結 熟女角色人氣碾壓眾生
超大型《MINECRAFT》企劃1/5冒險展開!百位VT&實況主 Kson也受邀參加
2D動畫視覺小說《鄰家的人妻》Steam商店公開!美艷人妻用身體招待主角
實況主騷擾台V超噁對話紀錄曝光!對方不給包養改口要人當「飛○杯」
日BL作家「台灣中文版」卻放五星旗?輕佻態度遭炎上 台灣簽名會已被取消
贊助廣告