工程師花5萬小時訓練AI遊玩《寶可夢》紅版 突破第一道館但走不出月見山

圖/擷取自 YouTube@Peter Whidden
圖/擷取自 YouTube@Peter Whidden

在經歷長達 5 萬小時的訓練與學習後,一位工程師成功讓一套 AI 模組學會如何遊玩《寶可夢:紅版》,創造出能夠自行探索遊戲,組成寶可夢隊伍,並成功擊敗第一道館的演算法。然而,這套 AI 一直到計畫結束時依然無法順利走出前往第二道館的月見山,或學會不要花錢買鯉魚王。即使如此,這項實驗依然讓玩家一窺機器學習技術的運作方式。

根據工程師 Peter Whidden 分享的流程影片,這套 AI 能夠在模擬器上以打破常規的輸入方式與遊戲進行互動,那就是能夠像人類一樣先按下一個操作按鍵後才觀察會發生什麼事。在實驗的開頭,Whidden 設置一段長約兩小時遊戲時間的學習流程,並利用模擬器的加速功能將其縮短到現實時間的 6 分鐘左右。在正式展開後,他更進一步讓 40 個測試情境同步進行。

由於機器演算法在本質上並不在乎「全破」一款遊戲,因此 Whidden 為 AI 演算法設計一套在完成特定目標時能夠獲得獎勵的系統。為了鼓勵 AI 在《寶可夢:紅版》中進行探索,只要能夠在地圖上看到一些之前沒有看過的東西,就能夠獲得獎勵點數。最終 AI 順利從真心鎮出發,穿過常盤森林,來到深灰市挑戰第一道館。

在那之前,AI 還需要更加完善的獎懲系統。在學會看到新事物能夠獲得獎勵後,雖然 AI 會開始不斷向前邁進,但完全不在乎收服寶可夢或進行對戰,而是在遇到野生寶可夢時立刻逃走。因此,Whidden 為獎勵系統加入更多內容,依照 AI 寶可夢隊伍的等級總和給予獎勵,讓它開始有動力去練等和捕捉寶可夢。

圖/擷取自 YouTube@Peter Whidden
圖/擷取自 YouTube@Peter Whidden

只不過在某一次的演算中,AI 走進寶可夢中心時意外開啟 PC,並在其中存放幾隻寶可夢。由於 AI 獲得的獎勵點數是依照隊伍等級總和而定,這個行為導致 AI 獲得的分數瞬間驟降。為了避免重蹈覆轍,AI 在那之後的所有演算中都選擇避開寶可夢中心,完全不敢進去為寶可夢補血,這讓 Whidden 不得不再次插手調整。

這套 AI 演算法最基本的運作方式,其實就是隨機在《寶可夢:紅版》中走動與遊戲進行互動,直到發現能夠以最有效率的方式獲得最多獎勵的路徑,並將經驗保留到下一次的演算中。在挑戰的過程中,AI 都只會使用最基本的攻擊招式撞擊來進行對戰,直到該招式的 PP 用完後才會使用其他選擇。某次演算中,AI 終於發現傑泥龜的泡沫攻擊能夠對小剛的寶可夢造成大量的傷害,最終順利擊敗這位道館館主。

圖/擷取自 YouTube@Peter Whidden
圖/擷取自 YouTube@Peter Whidden

即使 AI 在對於遊戲的理解與邏輯上依然比不上人類,但這場實驗發掘了一些更加深層的細節。根據 Whidden 的發現,AI 在經歷一段時間的演算後就開始固定以看似不尋常的路徑從真心鎮出發,直到遇到第一隻野生寶可夢。然而,這一系列的操作其實能夠保證 AI 能夠一球抓到遇見第一隻寶可夢。也就是說,AI 發現一個 Speedrun 玩家可能要花上好幾年的時間研究才有機會注意到的系統漏洞。

這套 AI 演算法在成功突破第一道館時基本上已經達成了 Whidden 最初設定的目標,但 Whidden 決定要讓 AI 的《寶可夢:紅版》冒險繼續下去,看看目前的獎勵機制到底能讓它走多遠。可惜的是,第一和第二道館之間的月見山對於看到新事物就能加分的 AI 來說實在是太過於容易分心,因此一直到 Whidden 決定讓實驗告一段落前都無法順利抵達華藍市。

除此之外,AI 似乎非常喜歡從鯉魚王大叔手中購買鯉魚王,因為這樣的行為能夠讓 AI 寶可夢隊伍的等級總和立刻多出五等,因此到實驗結束前,AI 在其中 1 萬次的演算中都跑去買了鯉魚王。另外值得注意的是,AI 有一次將抓來的小拉達命名為了「AI」,讓人細思極恐。

參考原文:GamesRadar

寶可夢 更多報導

日本Mister Donut推出「地鼠」造型波堤 網友:看起來像露南半球...

日本Mister Donut推出「地鼠」造型波堤 網友:看起來像露南半球...

寶可夢卡牌《Pokémon TCG Pocket》正式上線!沉浸式開卡包一直抽一直爽

寶可夢卡牌《Pokémon TCG Pocket》正式上線!沉浸式開卡包一直抽一直爽

《寶可夢》開發商GAME FREAK遭駭 疑似流出人類與「章魚桶」瑟瑟文本

《寶可夢》開發商GAME FREAK遭駭 疑似流出人類與「章魚桶」瑟瑟文本

猜你喜歡

同類好文

台灣人懂ㄉ都懂!書法家打造史詩級「精靈文」字體 開放全民免費下載

台灣人懂ㄉ都懂!書法家打造史詩級「精靈文」字體 開放全民免費下載

hololive佩克拉賽馬慘賠60萬 籲粉絲多看廣告:這樣就能抵銷...

hololive佩克拉賽馬慘賠60萬 籲粉絲多看廣告:這樣就能抵銷...

hololive Yagoo谷鄉元昭為下請法勸告一事道歉:努力改進以防再次發生

hololive Yagoo谷鄉元昭為下請法勸告一事道歉:努力改進以防再次發生

《反擊的巨獸》是什麼?知名紳士漫《對常來我家的辣妹為所欲為》掀討論

《反擊的巨獸》是什麼?知名紳士漫《對常來我家的辣妹為所欲為》掀討論

《英雄聯盟》台服深夜鬼抓人?玩家「聯合作秀」苦主遭虐泉還慘被停權

《英雄聯盟》台服深夜鬼抓人?玩家「聯合作秀」苦主遭虐泉還慘被停權

LOL世界賽/BLG Elk好奇T1 Gumayusi後續髮型動向?網笑:BL Gaming

LOL世界賽/BLG Elk好奇T1 Gumayusi後續髮型動向?網笑:BL Gaming

在地ROCK!教育部推出動畫《孤獨搖滾!》台語版 小孤獨變「孤單欸」

在地ROCK!教育部推出動畫《孤獨搖滾!》台語版 小孤獨變「孤單欸」

LOL/沒爭取到LCP席位...PCS戰隊DCG宣布「全體選手登出」結束合約

LOL/沒爭取到LCP席位...PCS戰隊DCG宣布「全體選手登出」結束合約

外國玩家為了「玩一輩子遊戲」花2000美金延長PS Plus會籍至2048年!

外國玩家為了「玩一輩子遊戲」花2000美金延長PS Plus會籍至2048年!

LOL世界賽/Faker玩「中路2選1」:Maple連過兩關、WBG小虎獲大量好評

LOL世界賽/Faker玩「中路2選1」:Maple連過兩關、WBG小虎獲大量好評

LOL世界賽/惺惺相惜!Uzi感嘆Chovy實力堅強卻沒有冠軍命:跟我一樣

LOL世界賽/惺惺相惜!Uzi感嘆Chovy實力堅強卻沒有冠軍命:跟我一樣

LOL世界賽/T1 Gumayusi賽後訪問吃「超大訂製可頌」一句話讓全場暴動

LOL世界賽/T1 Gumayusi賽後訪問吃「超大訂製可頌」一句話讓全場暴動

窩是番長!holo轟一小劇場繁中標題超接地氣 CC字幕還有「轟語」選項

窩是番長!holo轟一小劇場繁中標題超接地氣 CC字幕還有「轟語」選項

LOL/GEN青訓教練冠軍賽前公開分析「T1視野布置思路」韓網全炸鍋

LOL/GEN青訓教練冠軍賽前公開分析「T1視野布置思路」韓網全炸鍋

手遊《少女前線》中國服營運八年宣布年底停服 原因是「合約沒喬攏」

手遊《少女前線》中國服營運八年宣布年底停服 原因是「合約沒喬攏」

是想回歸?台V戰神「藤乃熊」時隔五個月發道歉啟事 卻遭受害者狠打臉

是想回歸?台V戰神「藤乃熊」時隔五個月發道歉啟事 卻遭受害者狠打臉

一冥驚人...索尼永久關閉《星鳴特攻》、解散開發團隊Firewalk Studios

一冥驚人...索尼永久關閉《星鳴特攻》、解散開發團隊Firewalk Studios

藍髮渾沌酒精怪人「Senzawa」突改X自介:Gura的頭號粉絲

藍髮渾沌酒精怪人「Senzawa」突改X自介:Gura的頭號粉絲

擦邊手遊《塵白禁域》被黨重拳制裁...官方祭「全額退款」補償 玩家大讚誠意滿滿

擦邊手遊《塵白禁域》被黨重拳制裁...官方祭「全額退款」補償 玩家大讚誠意滿滿

都回來了?繪師Namie睽違一年開台 熟悉澳洲腔「Hello?」最對味

都回來了?繪師Namie睽違一年開台 熟悉澳洲腔「Hello?」最對味

全是細節!《勝利女神:妮姬》灰姑娘、紅蓮:暗影造型藏有「香筋」

全是細節!《勝利女神:妮姬》灰姑娘、紅蓮:暗影造型藏有「香筋」

LOL/T1能否維持「ZOFGK」陣容?Keria、Gumayusi賽後發聲了

LOL/T1能否維持「ZOFGK」陣容?Keria、Gumayusi賽後發聲了

LOL世界賽/五冠王T1 Faker勇奪FMVP!期許自己繼續散播正能量、享受比賽

LOL世界賽/五冠王T1 Faker勇奪FMVP!期許自己繼續散播正能量、享受比賽

LOL世界賽/T1 3:2 BLG衛冕成功!Faker成五冠王、唯一「連霸兩次」選手

LOL世界賽/T1 3:2 BLG衛冕成功!Faker成五冠王、唯一「連霸兩次」選手

時雨羽衣200萬耐久遇粉絲玩退訂 限定一年以上留言:說不了話了吧活該

時雨羽衣200萬耐久遇粉絲玩退訂 限定一年以上留言:說不了話了吧活該

台木毛發起「114/5/14至郵遞區號114514王道銀行存114514元」活動 臭名傳回日本

台木毛發起「114/5/14至郵遞區號114514王道銀行存114514元」活動 臭名傳回日本

韓美少女繪師Biya診斷出腦震盪...將暫時停止一切活動

韓美少女繪師Biya診斷出腦震盪...將暫時停止一切活動

LOL世界賽/WBG小虎「踩雷」大失敗!前選手分析送頭原因

LOL世界賽/WBG小虎「踩雷」大失敗!前選手分析送頭原因

LOL/PCS剩2隊!LCP太平洋聯賽8支參賽戰隊曝光:僅PSG、CFO獲選

LOL/PCS剩2隊!LCP太平洋聯賽8支參賽戰隊曝光:僅PSG、CFO獲選

不給糖就...VTuber三毛貓萬聖節化身中華風女僕 粉絲直呼好可愛

不給糖就...VTuber三毛貓萬聖節化身中華風女僕 粉絲直呼好可愛

火熱排行

台灣人懂ㄉ都懂!書法家打造史詩級「精靈文」字體 開放全民免費下載

台灣人懂ㄉ都懂!書法家打造史詩級「精靈文」字體 開放全民免費下載

《反擊的巨獸》是什麼?知名紳士漫《對常來我家的辣妹為所欲為》掀討論

《反擊的巨獸》是什麼?知名紳士漫《對常來我家的辣妹為所欲為》掀討論

LOL/關係極差!T1 Oner談親姊姊:國中開始超討厭她

LOL/關係極差!T1 Oner談親姊姊:國中開始超討厭她

自己的玄關自己畫?《我推的孩子》作畫橫槍萌果:好想畫我推的本本

自己的玄關自己畫?《我推的孩子》作畫橫槍萌果:好想畫我推的本本

阿夸還在輸出!holo星街曝現況:不久前遇到她還在簽名

阿夸還在輸出!holo星街曝現況:不久前遇到她還在簽名

hololive佩克拉賽馬慘賠60萬 籲粉絲多看廣告:這樣就能抵銷...

hololive佩克拉賽馬慘賠60萬 籲粉絲多看廣告:這樣就能抵銷...

吉完再休!VTuber三毛貓宣布將對日本Yahoo留言區提告

吉完再休!VTuber三毛貓宣布將對日本Yahoo留言區提告

義務教育失敗!日VT因生理期停播 觀眾刷新智商下限:還說妳沒X經驗?

義務教育失敗!日VT因生理期停播 觀眾刷新智商下限:還說妳沒X經驗?

太甜了!台V橙米&喪屍迪正式登記結婚 線上婚禮派對與粉絲分享喜悅

太甜了!台V橙米&喪屍迪正式登記結婚 線上婚禮派對與粉絲分享喜悅

hololive Yagoo谷鄉元昭為下請法勸告一事道歉:努力改進以防再次發生

hololive Yagoo谷鄉元昭為下請法勸告一事道歉:努力改進以防再次發生

時雨羽衣200萬耐久遇粉絲玩退訂 限定一年以上留言:說不了話了吧活該

時雨羽衣200萬耐久遇粉絲玩退訂 限定一年以上留言:說不了話了吧活該

英國統計《英雄聯盟》玩家平均智商最高、手遊玩家智商最低

英國統計《英雄聯盟》玩家平均智商最高、手遊玩家智商最低

LOL世界賽/TES被T1打爆情有可原?FLY教練:可能是我們造成的

LOL世界賽/TES被T1打爆情有可原?FLY教練:可能是我們造成的

就是本人 貓耳粉藍女僕VTuber「結城さくな」將於27日進行初配信

就是本人 貓耳粉藍女僕VTuber「結城さくな」將於27日進行初配信

不准工作!萬代南夢宮200名員工疑遭「關進小房間」半數人已主動離職

不准工作!萬代南夢宮200名員工疑遭「關進小房間」半數人已主動離職

《英雄聯盟》台服深夜鬼抓人?玩家「聯合作秀」苦主遭虐泉還慘被停權

《英雄聯盟》台服深夜鬼抓人?玩家「聯合作秀」苦主遭虐泉還慘被停權

LOL/T1 Oner差點被下放二隊?談前教練Daeny被炒魷魚忍不住笑了

LOL/T1 Oner差點被下放二隊?談前教練Daeny被炒魷魚忍不住笑了

LOL世界賽/BLG Elk好奇T1 Gumayusi後續髮型動向?網笑:BL Gaming

LOL世界賽/BLG Elk好奇T1 Gumayusi後續髮型動向?網笑:BL Gaming

在地ROCK!教育部推出動畫《孤獨搖滾!》台語版 小孤獨變「孤單欸」

在地ROCK!教育部推出動畫《孤獨搖滾!》台語版 小孤獨變「孤單欸」

Steam純愛紳士《社團學姊》多采多「汁」的大學生活!美中卻有大量不足

Steam純愛紳士《社團學姊》多采多「汁」的大學生活!美中卻有大量不足

LOL世界賽/T1 Gumayusi賽後訪問吃「超大訂製可頌」一句話讓全場暴動

LOL世界賽/T1 Gumayusi賽後訪問吃「超大訂製可頌」一句話讓全場暴動

樂意朗讀!holo團長Cover《はいよろこんで》粉絲群體失憶:原曲是啥?

樂意朗讀!holo團長Cover《はいよろこんで》粉絲群體失憶:原曲是啥?

多位日籍台V陸續來台灣遊玩 茸茸鼠羨慕吐心聲:怎麼不找我?

多位日籍台V陸續來台灣遊玩 茸茸鼠羨慕吐心聲:怎麼不找我?

熟悉配色?「結城さくな」結束最棒夏天後突發神秘圖:粉髮紫瞳藍蝴蝶結

熟悉配色?「結城さくな」結束最棒夏天後突發神秘圖:粉髮紫瞳藍蝴蝶結

比《星鳴特攻》還差...恐怖遊戲《直到黎明》重製版登PS5、PC表現不如人意

比《星鳴特攻》還差...恐怖遊戲《直到黎明》重製版登PS5、PC表現不如人意

真人日劇《戀上換裝娃娃》名場面惹議!日網友諷:像是勉強自己的阿姨

真人日劇《戀上換裝娃娃》名場面惹議!日網友諷:像是勉強自己的阿姨

「PS5 Pro主機」第三波預購10/25中午12點開賣!線上搶購懶人包這裡看

「PS5 Pro主機」第三波預購10/25中午12點開賣!線上搶購懶人包這裡看

Steam紳士卡牌《死廢城的少女》心得:把離家出走的少女帶回家當腦婆!

Steam紳士卡牌《死廢城的少女》心得:把離家出走的少女帶回家當腦婆!

Steam純愛紳士《社團學姊》大一新生被戲劇社學姊們好吃一直吃!

Steam純愛紳士《社團學姊》大一新生被戲劇社學姊們好吃一直吃!

hololive大神澪考慮開Bluesky帳號:發粉絲二創圖變得困難

hololive大神澪考慮開Bluesky帳號:發粉絲二創圖變得困難