工程師花5萬小時訓練AI遊玩《寶可夢》紅版 突破第一道館但走不出月見山

在經歷長達 5 萬小時的訓練與學習後,一位工程師成功讓一套 AI 模組學會如何遊玩《寶可夢:紅版》,創造出能夠自行探索遊戲,組成寶可夢隊伍,並成功擊敗第一道館的演算法。然而,這套 AI 一直到計畫結束時依然無法順利走出前往第二道館的月見山,或學會不要花錢買鯉魚王。即使如此,這項實驗依然讓玩家一窺機器學習技術的運作方式。
根據工程師 Peter Whidden 分享的流程影片,這套 AI 能夠在模擬器上以打破常規的輸入方式與遊戲進行互動,那就是能夠像人類一樣先按下一個操作按鍵後才觀察會發生什麼事。在實驗的開頭,Whidden 設置一段長約兩小時遊戲時間的學習流程,並利用模擬器的加速功能將其縮短到現實時間的 6 分鐘左右。在正式展開後,他更進一步讓 40 個測試情境同步進行。
由於機器演算法在本質上並不在乎「全破」一款遊戲,因此 Whidden 為 AI 演算法設計一套在完成特定目標時能夠獲得獎勵的系統。為了鼓勵 AI 在《寶可夢:紅版》中進行探索,只要能夠在地圖上看到一些之前沒有看過的東西,就能夠獲得獎勵點數。最終 AI 順利從真心鎮出發,穿過常盤森林,來到深灰市挑戰第一道館。
在那之前,AI 還需要更加完善的獎懲系統。在學會看到新事物能夠獲得獎勵後,雖然 AI 會開始不斷向前邁進,但完全不在乎收服寶可夢或進行對戰,而是在遇到野生寶可夢時立刻逃走。因此,Whidden 為獎勵系統加入更多內容,依照 AI 寶可夢隊伍的等級總和給予獎勵,讓它開始有動力去練等和捕捉寶可夢。

只不過在某一次的演算中,AI 走進寶可夢中心時意外開啟 PC,並在其中存放幾隻寶可夢。由於 AI 獲得的獎勵點數是依照隊伍等級總和而定,這個行為導致 AI 獲得的分數瞬間驟降。為了避免重蹈覆轍,AI 在那之後的所有演算中都選擇避開寶可夢中心,完全不敢進去為寶可夢補血,這讓 Whidden 不得不再次插手調整。
這套 AI 演算法最基本的運作方式,其實就是隨機在《寶可夢:紅版》中走動與遊戲進行互動,直到發現能夠以最有效率的方式獲得最多獎勵的路徑,並將經驗保留到下一次的演算中。在挑戰的過程中,AI 都只會使用最基本的攻擊招式撞擊來進行對戰,直到該招式的 PP 用完後才會使用其他選擇。某次演算中,AI 終於發現傑泥龜的泡沫攻擊能夠對小剛的寶可夢造成大量的傷害,最終順利擊敗這位道館館主。

即使 AI 在對於遊戲的理解與邏輯上依然比不上人類,但這場實驗發掘了一些更加深層的細節。根據 Whidden 的發現,AI 在經歷一段時間的演算後就開始固定以看似不尋常的路徑從真心鎮出發,直到遇到第一隻野生寶可夢。然而,這一系列的操作其實能夠保證 AI 能夠一球抓到遇見第一隻寶可夢。也就是說,AI 發現一個 Speedrun 玩家可能要花上好幾年的時間研究才有機會注意到的系統漏洞。
這套 AI 演算法在成功突破第一道館時基本上已經達成了 Whidden 最初設定的目標,但 Whidden 決定要讓 AI 的《寶可夢:紅版》冒險繼續下去,看看目前的獎勵機制到底能讓它走多遠。可惜的是,第一和第二道館之間的月見山對於看到新事物就能加分的 AI 來說實在是太過於容易分心,因此一直到 Whidden 決定讓實驗告一段落前都無法順利抵達華藍市。
除此之外,AI 似乎非常喜歡從鯉魚王大叔手中購買鯉魚王,因為這樣的行為能夠讓 AI 寶可夢隊伍的等級總和立刻多出五等,因此到實驗結束前,AI 在其中 1 萬次的演算中都跑去買了鯉魚王。另外值得注意的是,AI 有一次將抓來的小拉達命名為了「AI」,讓人細思極恐。
參考原文:GamesRadar
猜你喜歡
同類好文

這能說嗎...小明劍魔談《進擊的巨人》:被關在牆裡還被洗腦的人真可憐

「計畫有變」是什麼?中國手遊玩家「公然出軌」一夜瞬間爆紅

慘遭社死?《英雄聯盟》中國選手Jiejie新女友遭爆是腐女 曾替其寫過大量BL文

Kson近期顯著變瘦 開玩笑表示絕不來台灣:他們很邪惡、會讓我變胖!

萬人同接!台V真理果媽媽「果媽」初配信知性美爆棚

《VRChat》表情捕捉太可愛!少女狡黠笑容征服網友掀二創潮

羽衣媽媽首次來台灣 見夾娃娃機盜版寶可夢:三隻皮卡丘顏色都不一樣

holo桃鈴音音首次參加社內茶會 Yagoo:對Nene只有甲蟲的印象

心態強大!Coser因化療掉光頭髮 藉機出角「光頭蘿蔔子」

VTuber Nimi揭露真實形象 自然而然流露慵懶氣質

預購Switch 2小心「陷阱同捆包」 !電商套餐綁《健身環》手把還得另外買

網路用太多了...AiScReam「我更喜歡你」AI影片二創滿天飛

VTuber結城昨日奈曝近期狀態:身體仍在康復中、考慮搬回老家

《蔚藍檔案》調月莉央戰鬥服亮相!「大到從背後看得見」掀二創潮

《Ave Mujica》聲優米澤茜來台吃滷味被列為「茜姐套餐」

《柏德之門3》8號更新再創人數高峰!拉瑞安工作室開始製作兩款新RPG

海豚練字帳ルカ個人簡介出現進度條?提醒追蹤者預留4/27晚上給自己

holo Gura繪師甘城媽媽對畢業消息同感震驚:隔天才慢慢接受這一現實

紳士名作《搾O病棟》推街機格鬥遊戲!惡質護士一言不合互潑「精華液」

海豚練字帳轉VTuber雨海ルカ4/27初配信!成立新社團WeatherPlanet

《鳴潮》一週年福利太差遭炎上!各國風向不一、「營運好可憐」登日本X趨勢

不是MVP而是ATM...小明劍魔實況與妻吵架 自曝婚後收入上百萬全上繳掀議

《天國降臨:救贖2》沒有兒童角色?官方:想保持高自由度同時避免爭議

主角換人當!《銀魂劇場版 2D 金魂篇》4/18上映 感人的《漫魂》也登上大銀幕

日VTuber新團WeatherPlanet再揭新人「天晴ひなた」!4/27晚上8點半出道

holo Kiara理解粉絲對「方向性不合」感困惑:成員檯面下畢業原因都很個人

羽神最終回?阿神與羽毛今晚八點直播對談:能不能上拳上就靠這次了

阿神曝杏仁咪嚕四年前早已道歉!咪嚕:感謝你的提攜

《排球少年!!》壽司郎聯名活動4/23起開跑!多款特典隨餐附贈

《Minecraft》YouTuber阿神、羽毛撕破臉!隔空開戰掀出4年前拆夥內幕
火熱排行

這能說嗎...小明劍魔談《進擊的巨人》:被關在牆裡還被洗腦的人真可憐

「計畫有變」是什麼?中國手遊玩家「公然出軌」一夜瞬間爆紅

兔田佩克拉直播涉及使用修改卡帶 任天堂回應hololive營運

ALP《無道德島嶼》全新彩圖疑暗示第四話?開放性行為好做一直做

就是本人!《劍星》伊芙體模申才恩Cosplay「海之女僕」造型

ALP紳士《例行性活動》動畫推出!與臭臉同學每天早上瘋狂晨跑

AI太誠實!網問Grok「VTuber三毛貓中之人幾歲?」答案超衝塔笑翻網友

阿神曝杏仁咪嚕四年前早已道歉!咪嚕:感謝你的提攜

台V真理果愚人節聯動YTR阿滴 線下見面認證果果中之人「真的不是滴妹」

吃完變月巴倫?必勝客合作《葬送的芙莉蓮》推出一公尺派對盒

抽卡手遊太瑟了?《棕色塵埃2》官方公開回應「歡迎來玩!」

紳士漫《對常來我家的辣妹為所欲為》合作Pan Piano推出特別繪圖!

誠意十足!《第一繼承者》官方展示「上半身物理效果」稱下半身也即將實裝

慘遭社死?《英雄聯盟》中國選手Jiejie新女友遭爆是腐女 曾替其寫過大量BL文

女角全部輸慘...《敗北女角太多了!》男主角溫水和彥立牌竟率先賣完

《天國降臨:救贖2》沒有兒童角色?官方:想保持高自由度同時避免爭議

Kson近期顯著變瘦 開玩笑表示絕不來台灣:他們很邪惡、會讓我變胖!

自己的流量自己賺!角落小編「橘攸奈」兼職VTuber出道 114514初配信

萬人同接!台V真理果媽媽「果媽」初配信知性美爆棚

AiScReam是什麼?《LoveLive!》聲優三人限定組合 甜美聲線突掀熱潮Ado也模仿

《鳴潮》坎特蕾拉、芙露德莉斯慘遭和諧...胖次變阿嬤內褲、褲縫痕跡消失

還沒結束!韓紳士漫《社團學姊》李舒欣if線告一段落 教授線尚有望發展

VTuber三毛貓與猫宮るな正面對決!對方質疑「您好像38歲了吧?」

hololiveEN神話組Gura即將於5/1畢業:能成為大家的小鯊魚是我的榮幸

holo桃鈴音音首次參加社內茶會 Yagoo:對Nene只有甲蟲的印象

《VRChat》表情捕捉太可愛!少女狡黠笑容征服網友掀二創潮

「冰水洗臉黑人」是什麼?健身網紅炫富行為超荒謬 遭歐美網友迷因化

《Minecraft》YouTuber阿神、羽毛撕破臉!隔空開戰掀出4年前拆夥內幕

羽衣媽媽首次來台灣 見夾娃娃機盜版寶可夢:三隻皮卡丘顏色都不一樣
