工程師花5萬小時訓練AI遊玩《寶可夢》紅版 突破第一道館但走不出月見山

圖/擷取自 YouTube@Peter Whidden
圖/擷取自 YouTube@Peter Whidden

在經歷長達 5 萬小時的訓練與學習後,一位工程師成功讓一套 AI 模組學會如何遊玩《寶可夢:紅版》,創造出能夠自行探索遊戲,組成寶可夢隊伍,並成功擊敗第一道館的演算法。然而,這套 AI 一直到計畫結束時依然無法順利走出前往第二道館的月見山,或學會不要花錢買鯉魚王。即使如此,這項實驗依然讓玩家一窺機器學習技術的運作方式。

根據工程師 Peter Whidden 分享的流程影片,這套 AI 能夠在模擬器上以打破常規的輸入方式與遊戲進行互動,那就是能夠像人類一樣先按下一個操作按鍵後才觀察會發生什麼事。在實驗的開頭,Whidden 設置一段長約兩小時遊戲時間的學習流程,並利用模擬器的加速功能將其縮短到現實時間的 6 分鐘左右。在正式展開後,他更進一步讓 40 個測試情境同步進行。

由於機器演算法在本質上並不在乎「全破」一款遊戲,因此 Whidden 為 AI 演算法設計一套在完成特定目標時能夠獲得獎勵的系統。為了鼓勵 AI 在《寶可夢:紅版》中進行探索,只要能夠在地圖上看到一些之前沒有看過的東西,就能夠獲得獎勵點數。最終 AI 順利從真心鎮出發,穿過常盤森林,來到深灰市挑戰第一道館。

在那之前,AI 還需要更加完善的獎懲系統。在學會看到新事物能夠獲得獎勵後,雖然 AI 會開始不斷向前邁進,但完全不在乎收服寶可夢或進行對戰,而是在遇到野生寶可夢時立刻逃走。因此,Whidden 為獎勵系統加入更多內容,依照 AI 寶可夢隊伍的等級總和給予獎勵,讓它開始有動力去練等和捕捉寶可夢。

圖/擷取自 YouTube@Peter Whidden
圖/擷取自 YouTube@Peter Whidden

只不過在某一次的演算中,AI 走進寶可夢中心時意外開啟 PC,並在其中存放幾隻寶可夢。由於 AI 獲得的獎勵點數是依照隊伍等級總和而定,這個行為導致 AI 獲得的分數瞬間驟降。為了避免重蹈覆轍,AI 在那之後的所有演算中都選擇避開寶可夢中心,完全不敢進去為寶可夢補血,這讓 Whidden 不得不再次插手調整。

這套 AI 演算法最基本的運作方式,其實就是隨機在《寶可夢:紅版》中走動與遊戲進行互動,直到發現能夠以最有效率的方式獲得最多獎勵的路徑,並將經驗保留到下一次的演算中。在挑戰的過程中,AI 都只會使用最基本的攻擊招式撞擊來進行對戰,直到該招式的 PP 用完後才會使用其他選擇。某次演算中,AI 終於發現傑泥龜的泡沫攻擊能夠對小剛的寶可夢造成大量的傷害,最終順利擊敗這位道館館主。

圖/擷取自 YouTube@Peter Whidden
圖/擷取自 YouTube@Peter Whidden

即使 AI 在對於遊戲的理解與邏輯上依然比不上人類,但這場實驗發掘了一些更加深層的細節。根據 Whidden 的發現,AI 在經歷一段時間的演算後就開始固定以看似不尋常的路徑從真心鎮出發,直到遇到第一隻野生寶可夢。然而,這一系列的操作其實能夠保證 AI 能夠一球抓到遇見第一隻寶可夢。也就是說,AI 發現一個 Speedrun 玩家可能要花上好幾年的時間研究才有機會注意到的系統漏洞。

這套 AI 演算法在成功突破第一道館時基本上已經達成了 Whidden 最初設定的目標,但 Whidden 決定要讓 AI 的《寶可夢:紅版》冒險繼續下去,看看目前的獎勵機制到底能讓它走多遠。可惜的是,第一和第二道館之間的月見山對於看到新事物就能加分的 AI 來說實在是太過於容易分心,因此一直到 Whidden 決定讓實驗告一段落前都無法順利抵達華藍市。

除此之外,AI 似乎非常喜歡從鯉魚王大叔手中購買鯉魚王,因為這樣的行為能夠讓 AI 寶可夢隊伍的等級總和立刻多出五等,因此到實驗結束前,AI 在其中 1 萬次的演算中都跑去買了鯉魚王。另外值得注意的是,AI 有一次將抓來的小拉達命名為了「AI」,讓人細思極恐。

參考原文:GamesRadar

寶可夢 更多報導

《Pokémon TCG Pocket》團隊:今年將有新擴充包、交換卡牌功能1月上線

《Pokémon TCG Pocket》團隊:今年將有新擴充包、交換卡牌功能1月上線

《Pokémon TCG Pocket》中毒?holo Biboo、Raora聯動中途唐突開卡包

《Pokémon TCG Pocket》中毒?holo Biboo、Raora聯動中途唐突開卡包

日本Mister Donut推出「地鼠」造型波堤 網友:看起來像露南半球...

日本Mister Donut推出「地鼠」造型波堤 網友:看起來像露南半球...

猜你喜歡

同類好文

LOL/李哥請客了!T1 Faker一次破費兩萬、遲到大王本性難移隊友都無言?

LOL/李哥請客了!T1 Faker一次破費兩萬、遲到大王本性難移隊友都無言?

LOL/Zeus捲離隊風波...經紀公司深夜緊急聲明:社群大量傳聞與事實不符

LOL/Zeus捲離隊風波...經紀公司深夜緊急聲明:社群大量傳聞與事實不符

虧損80億以上!萬代南夢宮線上宣布倒閉 2025年併回萬代南夢宮娛樂

虧損80億以上!萬代南夢宮線上宣布倒閉 2025年併回萬代南夢宮娛樂

《holo英語聽力學習》中文版開箱:會話藏哏好生草、音檔全由神話組獻聲

《holo英語聽力學習》中文版開箱:會話藏哏好生草、音檔全由神話組獻聲

LOL/T1 Gumayusi曝Keria細心照顧:幫我要人頭、半夜三點幫我買藥

LOL/T1 Gumayusi曝Keria細心照顧:幫我要人頭、半夜三點幫我買藥

LOL/T1新上路Doran入隊首播同接衝破6萬人 回憶簽約過程:睡到一半被叫去開會

LOL/T1新上路Doran入隊首播同接衝破6萬人 回憶簽約過程:睡到一半被叫去開會

LOL/組一輩子戰隊!GEN公佈2025陣容:Chovy、Ruler簽約至2027

LOL/組一輩子戰隊!GEN公佈2025陣容:Chovy、Ruler簽約至2027

日本二手ACG龍頭「駿河屋」登陸台灣!快閃店位置確定了在西門誠品

日本二手ACG龍頭「駿河屋」登陸台灣!快閃店位置確定了在西門誠品

LOL/T1光速切割Zeus...官方會員社群查無此人 粉絲要求刪除應援曲

LOL/T1光速切割Zeus...官方會員社群查無此人 粉絲要求刪除應援曲

LOL/T1 CEO揭密「Zeus離隊始末」!指控經紀公司絲毫不給討論空間

LOL/T1 CEO揭密「Zeus離隊始末」!指控經紀公司絲毫不給討論空間

LOL/Zeus離隊風波還在燒!經紀公司聲明猛烈回擊 公開與T1談判時間軸

LOL/Zeus離隊風波還在燒!經紀公司聲明猛烈回擊 公開與T1談判時間軸

LOL/為何T1新上路Doran貼文下方都刷一排恐龍?你不可錯過的多蘭唱歌合輯

LOL/為何T1新上路Doran貼文下方都刷一排恐龍?你不可錯過的多蘭唱歌合輯

holoX三周年原創曲MV公開!感動時刻閃過破破手寫字?粉:一眼認鯨文

holoX三周年原創曲MV公開!感動時刻閃過破破手寫字?粉:一眼認鯨文

Google台灣年度榜單出爐:《劍與遠征:啟程》奪最佳遊戲、《鳴潮》獲最佳劇情

Google台灣年度榜單出爐:《劍與遠征:啟程》奪最佳遊戲、《鳴潮》獲最佳劇情

LOL/T1上路Zeus離隊早有跡象?本人曝:2023奪冠就考慮離開

LOL/T1上路Zeus離隊早有跡象?本人曝:2023奪冠就考慮離開

LOL/PSG Talon轉會期消息一次看!中路Maple正式宣佈退役

LOL/PSG Talon轉會期消息一次看!中路Maple正式宣佈退役

沒有無視燈!MyGO主唱高松燈今生日 聲優羊宮妃那:我與小燈密不可分

沒有無視燈!MyGO主唱高松燈今生日 聲優羊宮妃那:我與小燈密不可分

台V杏仁咪嚕公開3D新衣裝 雙馬尾偶像可愛不到三秒即出現國際手勢

台V杏仁咪嚕公開3D新衣裝 雙馬尾偶像可愛不到三秒即出現國際手勢

另有其人?《劍星》伊芙新體模「尹雪華」亮相!

另有其人?《劍星》伊芙新體模「尹雪華」亮相!

LOL/T1前上路Zeus離隊後首發聲:抱歉沒能向大家好好道別 在T1很幸福

LOL/T1前上路Zeus離隊後首發聲:抱歉沒能向大家好好道別 在T1很幸福

hololive佩可拉談公司方針改變的影響:想做的直播被拒 自己也曾感到不解...

hololive佩可拉談公司方針改變的影響:想做的直播被拒 自己也曾感到不解...

日繪師曬貓自製「咪集恐懼症」圖片浮水印!想躲AI學習卻掉了上千追蹤

日繪師曬貓自製「咪集恐懼症」圖片浮水印!想躲AI學習卻掉了上千追蹤

LOL/Zeus確定加盟HLE!AD Viper也續簽 銀河戰艦正式啟航

LOL/Zeus確定加盟HLE!AD Viper也續簽 銀河戰艦正式啟航

《劍星》合作《尼爾:自動人形》DLC服裝有彩蛋!偷窺裙底風光會有「業界獎勵」

《劍星》合作《尼爾:自動人形》DLC服裝有彩蛋!偷窺裙底風光會有「業界獎勵」

偷飆車?《蔚藍檔案》新角躲老師桌子底下 狼師大讚真刺激

偷飆車?《蔚藍檔案》新角躲老師桌子底下 狼師大讚真刺激

LOL/恭喜回家!雙冠輔助「原神哥」BeryL回歸老東家DK

LOL/恭喜回家!雙冠輔助「原神哥」BeryL回歸老東家DK

我推的副駕!holo AZKi推出汽車語音導航 與駕駛閒聊讓你開車兼暈船

我推的副駕!holo AZKi推出汽車語音導航 與駕駛閒聊讓你開車兼暈船

再燒上百萬美元!《流亡黯道2》總監解釋延期三週原因

再燒上百萬美元!《流亡黯道2》總監解釋延期三週原因

一起開車!holo人形地圖AZKi與地圖APP合作推出「導航語音」

一起開車!holo人形地圖AZKi與地圖APP合作推出「導航語音」

台灣阿嬤準備開餵!單親媽媽VT乙夏鈴抵台 女兒鈴果早餐大嗑油條

台灣阿嬤準備開餵!單親媽媽VT乙夏鈴抵台 女兒鈴果早餐大嗑油條

火熱排行

日紳士繪師與畫像合照掀「波瀾」!網驚:女角身材難道參考自己

日紳士繪師與畫像合照掀「波瀾」!網驚:女角身材難道參考自己

台灣人懂ㄉ都懂!書法家打造史詩級「精靈文」字體 開放全民免費下載

台灣人懂ㄉ都懂!書法家打造史詩級「精靈文」字體 開放全民免費下載

hololive佩可拉談公司方針改變的影響:想做的直播被拒 自己也曾感到不解...

hololive佩可拉談公司方針改變的影響:想做的直播被拒 自己也曾感到不解...

R星副總裁曾表示「川普總統任內不會推出《GTA6》」!

R星副總裁曾表示「川普總統任內不會推出《GTA6》」!

另有其人?《劍星》伊芙新體模「尹雪華」亮相!

另有其人?《劍星》伊芙新體模「尹雪華」亮相!

hololive佩克拉賽馬慘賠60萬 籲粉絲多看廣告:這樣就能抵銷...

hololive佩克拉賽馬慘賠60萬 籲粉絲多看廣告:這樣就能抵銷...

一直攝一直爽!紳士漫《對常來我家的辣妹為所欲為》真人版再翻拍 預計年底推出

一直攝一直爽!紳士漫《對常來我家的辣妹為所欲為》真人版再翻拍 預計年底推出

LOL/T1 Keria覆盤世界賽:派克很強 但教練不相信我還放馬後炮

LOL/T1 Keria覆盤世界賽:派克很強 但教練不相信我還放馬後炮

水出新高度?《藍色監獄》動畫「謎之縮時」片段混時間 巴哈評分降至3.8

水出新高度?《藍色監獄》動畫「謎之縮時」片段混時間 巴哈評分降至3.8

hololive Yagoo谷鄉元昭為下請法勸告一事道歉:努力改進以防再次發生

hololive Yagoo谷鄉元昭為下請法勸告一事道歉:努力改進以防再次發生

LOL世界賽/T1決賽全語音釋出!最後「2打4關鍵團戰」全隊早有預謀?

LOL世界賽/T1決賽全語音釋出!最後「2打4關鍵團戰」全隊早有預謀?

LOL/李哥請客了!T1 Faker一次破費兩萬、遲到大王本性難移隊友都無言?

LOL/李哥請客了!T1 Faker一次破費兩萬、遲到大王本性難移隊友都無言?

LOL/T1 Oner覆盤世界賽:看Faker開戰就本能跟上了 根本不知道BLG有沒有閃現

LOL/T1 Oner覆盤世界賽:看Faker開戰就本能跟上了 根本不知道BLG有沒有閃現

Steam純愛紳士《社團學姊》多采多「汁」的大學生活!美中卻有大量不足

Steam純愛紳士《社團學姊》多采多「汁」的大學生活!美中卻有大量不足

LOL/T1能否維持「ZOFGK」陣容?Keria、Gumayusi賽後發聲了

LOL/T1能否維持「ZOFGK」陣容?Keria、Gumayusi賽後發聲了

LOL/Zeus捲離隊風波...經紀公司深夜緊急聲明:社群大量傳聞與事實不符

LOL/Zeus捲離隊風波...經紀公司深夜緊急聲明:社群大量傳聞與事實不符

虧損80億以上!萬代南夢宮線上宣布倒閉 2025年併回萬代南夢宮娛樂

虧損80億以上!萬代南夢宮線上宣布倒閉 2025年併回萬代南夢宮娛樂

《英雄聯盟》台服深夜鬼抓人?玩家「聯合作秀」苦主遭虐泉還慘被停權

《英雄聯盟》台服深夜鬼抓人?玩家「聯合作秀」苦主遭虐泉還慘被停權

LOL/解散前兆?BLG Bin、Knight微博取消追蹤戰隊帳號

LOL/解散前兆?BLG Bin、Knight微博取消追蹤戰隊帳號

在地ROCK!教育部推出動畫《孤獨搖滾!》台語版 小孤獨變「孤單欸」

在地ROCK!教育部推出動畫《孤獨搖滾!》台語版 小孤獨變「孤單欸」

LOL世界賽/BLG Elk好奇T1 Gumayusi後續髮型動向?網笑:BL Gaming

LOL世界賽/BLG Elk好奇T1 Gumayusi後續髮型動向?網笑:BL Gaming

瑟瑟克服一切!日文諧音紳士遊戲被玩家「完整中文化」原作者也驚呆了

瑟瑟克服一切!日文諧音紳士遊戲被玩家「完整中文化」原作者也驚呆了

VTuber camila直播中遭人敲窗欲闖入!警方介入嫌犯反覆叨念:我們是朋友...

VTuber camila直播中遭人敲窗欲闖入!警方介入嫌犯反覆叨念:我們是朋友...

索尼社長承認《星鳴特攻》失敗!稱已學到教訓、應更早實施內部評估

索尼社長承認《星鳴特攻》失敗!稱已學到教訓、應更早實施內部評估

《碧藍航線》官方繪師揭「武藏」紳士動畫!汲汲營營害二弟口吐白沫

《碧藍航線》官方繪師揭「武藏」紳士動畫!汲汲營營害二弟口吐白沫

LOL世界賽/T1 Gumayusi賽後訪問吃「超大訂製可頌」一句話讓全場暴動

LOL世界賽/T1 Gumayusi賽後訪問吃「超大訂製可頌」一句話讓全場暴動

紳士漫畫《宅友》第三集揭預告圖!一發不可收拾就多來幾發

紳士漫畫《宅友》第三集揭預告圖!一發不可收拾就多來幾發

太強了...日籍台V虎子讀台灣「精靈文」喊好難卻能答對八成

太強了...日籍台V虎子讀台灣「精靈文」喊好難卻能答對八成

瑟瑟寶可夢《一次性交易大師》DLC2「母豬米亞的遺產」推出!Steam版再等等

瑟瑟寶可夢《一次性交易大師》DLC2「母豬米亞的遺產」推出!Steam版再等等

人妻模特申才恩Cosplay《劍星》服裝!側邊開衩到胸還原度極高

人妻模特申才恩Cosplay《劍星》服裝!側邊開衩到胸還原度極高