工程師花5萬小時訓練AI遊玩《寶可夢》紅版 突破第一道館但走不出月見山

圖/擷取自 YouTube@Peter Whidden
圖/擷取自 YouTube@Peter Whidden

在經歷長達 5 萬小時的訓練與學習後,一位工程師成功讓一套 AI 模組學會如何遊玩《寶可夢:紅版》,創造出能夠自行探索遊戲,組成寶可夢隊伍,並成功擊敗第一道館的演算法。然而,這套 AI 一直到計畫結束時依然無法順利走出前往第二道館的月見山,或學會不要花錢買鯉魚王。即使如此,這項實驗依然讓玩家一窺機器學習技術的運作方式。

根據工程師 Peter Whidden 分享的流程影片,這套 AI 能夠在模擬器上以打破常規的輸入方式與遊戲進行互動,那就是能夠像人類一樣先按下一個操作按鍵後才觀察會發生什麼事。在實驗的開頭,Whidden 設置一段長約兩小時遊戲時間的學習流程,並利用模擬器的加速功能將其縮短到現實時間的 6 分鐘左右。在正式展開後,他更進一步讓 40 個測試情境同步進行。

由於機器演算法在本質上並不在乎「全破」一款遊戲,因此 Whidden 為 AI 演算法設計一套在完成特定目標時能夠獲得獎勵的系統。為了鼓勵 AI 在《寶可夢:紅版》中進行探索,只要能夠在地圖上看到一些之前沒有看過的東西,就能夠獲得獎勵點數。最終 AI 順利從真心鎮出發,穿過常盤森林,來到深灰市挑戰第一道館。

在那之前,AI 還需要更加完善的獎懲系統。在學會看到新事物能夠獲得獎勵後,雖然 AI 會開始不斷向前邁進,但完全不在乎收服寶可夢或進行對戰,而是在遇到野生寶可夢時立刻逃走。因此,Whidden 為獎勵系統加入更多內容,依照 AI 寶可夢隊伍的等級總和給予獎勵,讓它開始有動力去練等和捕捉寶可夢。

圖/擷取自 YouTube@Peter Whidden
圖/擷取自 YouTube@Peter Whidden

只不過在某一次的演算中,AI 走進寶可夢中心時意外開啟 PC,並在其中存放幾隻寶可夢。由於 AI 獲得的獎勵點數是依照隊伍等級總和而定,這個行為導致 AI 獲得的分數瞬間驟降。為了避免重蹈覆轍,AI 在那之後的所有演算中都選擇避開寶可夢中心,完全不敢進去為寶可夢補血,這讓 Whidden 不得不再次插手調整。

這套 AI 演算法最基本的運作方式,其實就是隨機在《寶可夢:紅版》中走動與遊戲進行互動,直到發現能夠以最有效率的方式獲得最多獎勵的路徑,並將經驗保留到下一次的演算中。在挑戰的過程中,AI 都只會使用最基本的攻擊招式撞擊來進行對戰,直到該招式的 PP 用完後才會使用其他選擇。某次演算中,AI 終於發現傑泥龜的泡沫攻擊能夠對小剛的寶可夢造成大量的傷害,最終順利擊敗這位道館館主。

圖/擷取自 YouTube@Peter Whidden
圖/擷取自 YouTube@Peter Whidden

即使 AI 在對於遊戲的理解與邏輯上依然比不上人類,但這場實驗發掘了一些更加深層的細節。根據 Whidden 的發現,AI 在經歷一段時間的演算後就開始固定以看似不尋常的路徑從真心鎮出發,直到遇到第一隻野生寶可夢。然而,這一系列的操作其實能夠保證 AI 能夠一球抓到遇見第一隻寶可夢。也就是說,AI 發現一個 Speedrun 玩家可能要花上好幾年的時間研究才有機會注意到的系統漏洞。

這套 AI 演算法在成功突破第一道館時基本上已經達成了 Whidden 最初設定的目標,但 Whidden 決定要讓 AI 的《寶可夢:紅版》冒險繼續下去,看看目前的獎勵機制到底能讓它走多遠。可惜的是,第一和第二道館之間的月見山對於看到新事物就能加分的 AI 來說實在是太過於容易分心,因此一直到 Whidden 決定讓實驗告一段落前都無法順利抵達華藍市。

除此之外,AI 似乎非常喜歡從鯉魚王大叔手中購買鯉魚王,因為這樣的行為能夠讓 AI 寶可夢隊伍的等級總和立刻多出五等,因此到實驗結束前,AI 在其中 1 萬次的演算中都跑去買了鯉魚王。另外值得注意的是,AI 有一次將抓來的小拉達命名為了「AI」,讓人細思極恐。

參考原文:GamesRadar

寶可夢 更多報導

《幻獸帕魯》社群總監談被任天堂提告一事:訝異其針對「專利侵犯」部分

《幻獸帕魯》社群總監談被任天堂提告一事:訝異其針對「專利侵犯」部分

Niantic把《Pokémon Go》賣了!中東遊戲巨頭豪擲35億美元天價收購3IP

Niantic把《Pokémon Go》賣了!中東遊戲巨頭豪擲35億美元天價收購3IP

《寶可夢》與本田汽車合作推出《朱》神獸「故勒頓」概念重機

《寶可夢》與本田汽車合作推出《朱》神獸「故勒頓」概念重機

猜你喜歡

同類好文

「書本夾歐派」是什麼?一張圖掀起X大量二創、曬身材熱潮

「書本夾歐派」是什麼?一張圖掀起X大量二創、曬身材熱潮

VT時雨羽衣拿到台灣合作Cafe腳本 台詞垃圾、人渣連發:台灣人不太妙...

VT時雨羽衣拿到台灣合作Cafe腳本 台詞垃圾、人渣連發:台灣人不太妙...

恐怖慎入!《沉默之丘f》最新預告釋出 實體版限定鐵盒女主角面目全非

恐怖慎入!《沉默之丘f》最新預告釋出 實體版限定鐵盒女主角面目全非

就是本人!日繪師自拍分享「繪圖參考資料」絕對領域完全還原

就是本人!日繪師自拍分享「繪圖參考資料」絕對領域完全還原

疑男性用變聲器?爭議VTuber猫宮るな初配信 時不時傳不自然電子音

疑男性用變聲器?爭議VTuber猫宮るな初配信 時不時傳不自然電子音

holo雙子Mococo首次單獨開台 Fuwawa短暫現身僅能以氣音Bau Bau

holo雙子Mococo首次單獨開台 Fuwawa短暫現身僅能以氣音Bau Bau

台V盜圖道歉影片還開鏡頭?直播曝是上層指示炎上商法:黑粉也是粉

台V盜圖道歉影片還開鏡頭?直播曝是上層指示炎上商法:黑粉也是粉

有警告但不多...《刺客教條:暗影者》首遇鳥居系統提示:不攀爬以示尊敬

有警告但不多...《刺客教條:暗影者》首遇鳥居系統提示:不攀爬以示尊敬

Steam 97%極好評《彌助模擬器》上市!百元有找一小時可全破

Steam 97%極好評《彌助模擬器》上市!百元有找一小時可全破

網紅黃小潔正式撕膜「羽衣媽媽痛車」 打造影片之收益將以抖內形式歸還

網紅黃小潔正式撕膜「羽衣媽媽痛車」 打造影片之收益將以抖內形式歸還

遭惡意撞名還被攻擊...出道四年VT猫宮るな:痛苦且身心俱疲

遭惡意撞名還被攻擊...出道四年VT猫宮るな:痛苦且身心俱疲

職業傷害?VTuber時雨羽衣3D動捕站姿引熱議 「駝背羽衣」掀二創潮

職業傷害?VTuber時雨羽衣3D動捕站姿引熱議 「駝背羽衣」掀二創潮

holo星街彗星坦言希望停止「很小」哏:無須攻擊曾玩過哏的人

holo星街彗星坦言希望停止「很小」哏:無須攻擊曾玩過哏的人

似曾相識?holo Kiara玩《inZOI》捏臉驚呼:感覺自己像真人實況主

似曾相識?holo Kiara玩《inZOI》捏臉驚呼:感覺自己像真人實況主

中國繪師指控《碧藍航線》抄襲其原創「暗黑護士」服裝!稱五年前就設計出

中國繪師指控《碧藍航線》抄襲其原創「暗黑護士」服裝!稱五年前就設計出

被陰了?VTuber工商《刺客教條:暗影者》卻吃版權炮 竟是Ubisoft搞錯時間

被陰了?VTuber工商《刺客教條:暗影者》卻吃版權炮 竟是Ubisoft搞錯時間

VT時雨羽衣出面解答駝背原因 曝傻眼時會將頭往前伸:類似「蛤貓」的感覺

VT時雨羽衣出面解答駝背原因 曝傻眼時會將頭往前伸:類似「蛤貓」的感覺

台灣暖男野兔救人時遺失螢光棒 holo官方寄送多樣周邊並致以感謝信

台灣暖男野兔救人時遺失螢光棒 holo官方寄送多樣周邊並致以感謝信

hololive DEV_IS「青君」火威青將暫停活動 經醫師診斷為適應障礙

hololive DEV_IS「青君」火威青將暫停活動 經醫師診斷為適應障礙

Yagoo哭暈在廁所...holo Risu玩挖洞遊戲打造曠世G作、從「頭」挖起

Yagoo哭暈在廁所...holo Risu玩挖洞遊戲打造曠世G作、從「頭」挖起

可以養幽靈!《Minecraft》玩家可培育「快樂幽靈」 支援4人騎乘飛行

可以養幽靈!《Minecraft》玩家可培育「快樂幽靈」 支援4人騎乘飛行

再次切割?《Ave Mujica》劇本統籌:噁心且複雜的設定都與我無關

再次切割?《Ave Mujica》劇本統籌:噁心且複雜的設定都與我無關

眼睛失神?《葬送的芙莉蓮》費倫SEGA景品官方圖公開

眼睛失神?《葬送的芙莉蓮》費倫SEGA景品官方圖公開

holo星街彗星談對於「很小」哏的想法:發起者一直很顧慮我的感受

holo星街彗星談對於「很小」哏的想法:發起者一直很顧慮我的感受

要出動修女了嗎...逆流而上系VTuber「鮭魚鮭魚子」形象配大姊姊音真香

要出動修女了嗎...逆流而上系VTuber「鮭魚鮭魚子」形象配大姊姊音真香

《刺客教條:暗影者》緊急改動「無法破壞神社部分物體」?編輯親自實測

《刺客教條:暗影者》緊急改動「無法破壞神社部分物體」?編輯親自實測

神谷英樹稱《刺客教條:暗影者》遭過度批評 認為大多數玩家不太在乎

神谷英樹稱《刺客教條:暗影者》遭過度批評 認為大多數玩家不太在乎

《戀上換裝娃娃》完結!連載七年畫下句點 還有番外篇與尾聲故事

《戀上換裝娃娃》完結!連載七年畫下句點 還有番外篇與尾聲故事

台網紅黃小潔針對「羽衣媽媽痛車」發布聲明 日方盼避免使用

台網紅黃小潔針對「羽衣媽媽痛車」發布聲明 日方盼避免使用

果媽4月初配信預備!台V真理果一次多項重大宣布:3.0衣裝由KT老師設計

果媽4月初配信預備!台V真理果一次多項重大宣布:3.0衣裝由KT老師設計

火熱排行

「書本夾歐派」是什麼?一張圖掀起X大量二創、曬身材熱潮

「書本夾歐派」是什麼?一張圖掀起X大量二創、曬身材熱潮

holo貓又小粥回顧4年前生日Live放送事故:不是任何人的錯、自己已經放下了

holo貓又小粥回顧4年前生日Live放送事故:不是任何人的錯、自己已經放下了

日調查千名玩家去年最愛遊戲:前20名幾乎都是日本IP 唯一例外是《原神》

日調查千名玩家去年最愛遊戲:前20名幾乎都是日本IP 唯一例外是《原神》

VT時雨羽衣拿到台灣合作Cafe腳本 台詞垃圾、人渣連發:台灣人不太妙...

VT時雨羽衣拿到台灣合作Cafe腳本 台詞垃圾、人渣連發:台灣人不太妙...

組一輩子團!國外玩家笑談《龍與地下城》跑團50年心路歷程

組一輩子團!國外玩家笑談《龍與地下城》跑團50年心路歷程

Visa、Mastercard回歸DLsite但紳士們十分悲觀:好多東西不見了

Visa、Mastercard回歸DLsite但紳士們十分悲觀:好多東西不見了

強調「原廠唯一授權」!樂意宣布重新代理《SF Online》3月上市

強調「原廠唯一授權」!樂意宣布重新代理《SF Online》3月上市

恐怖慎入!《沉默之丘f》最新預告釋出 實體版限定鐵盒女主角面目全非

恐怖慎入!《沉默之丘f》最新預告釋出 實體版限定鐵盒女主角面目全非

粉隨偶像!holo粉絲以Towa應援毛巾為傷者止血 天使行為讓推本人留言讚賞

粉隨偶像!holo粉絲以Towa應援毛巾為傷者止血 天使行為讓推本人留言讚賞

前卡普空概念美術抱怨沒出現在《魔物獵人荒野》製作名單裡!本人事後刪文

前卡普空概念美術抱怨沒出現在《魔物獵人荒野》製作名單裡!本人事後刪文

小明劍魔「找自己問題」、「我老爸得了MVP」是什麼梗?實況主開噴網友掀大量二創

小明劍魔「找自己問題」、「我老爸得了MVP」是什麼梗?實況主開噴網友掀大量二創

就是本人!日繪師自拍分享「繪圖參考資料」絕對領域完全還原

就是本人!日繪師自拍分享「繪圖參考資料」絕對領域完全還原

疑男性用變聲器?爭議VTuber猫宮るな初配信 時不時傳不自然電子音

疑男性用變聲器?爭議VTuber猫宮るな初配信 時不時傳不自然電子音

holo雙子Mococo首次單獨開台 Fuwawa短暫現身僅能以氣音Bau Bau

holo雙子Mococo首次單獨開台 Fuwawa短暫現身僅能以氣音Bau Bau

DLsite好評紳士《怪物黑市》繁中步兵版發售!瑟瑟魔物產業鏈...受孕販賣一條龍

DLsite好評紳士《怪物黑市》繁中步兵版發售!瑟瑟魔物產業鏈...受孕販賣一條龍

台灣野兔holo大拜拜協助救護掀海內外熱議 助人善舉Kiara、Iofi都留言感謝

台灣野兔holo大拜拜協助救護掀海內外熱議 助人善舉Kiara、Iofi都留言感謝

VTuber視訊鏡頭露手遭羞辱為「怪物」 本人高EQ回應意外圈粉

VTuber視訊鏡頭露手遭羞辱為「怪物」 本人高EQ回應意外圈粉

《刺客教條:暗影者》推珍奶套組合作周邊 海外網友:那是台灣的

《刺客教條:暗影者》推珍奶套組合作周邊 海外網友:那是台灣的

不是亂叫?實況主小明劍魔學凱能E、R叫聲唯妙唯肖 網笑:熟練地令人心疼

不是亂叫?實況主小明劍魔學凱能E、R叫聲唯妙唯肖 網笑:熟練地令人心疼

VTuber「Ironmouse」為慢性病同行發聲:這並非甚麼噱頭 而是糟糕的現實

VTuber「Ironmouse」為慢性病同行發聲:這並非甚麼噱頭 而是糟糕的現實

台V盜圖道歉影片還開鏡頭?直播曝是上層指示炎上商法:黑粉也是粉

台V盜圖道歉影片還開鏡頭?直播曝是上層指示炎上商法:黑粉也是粉

想改造型...玩家自製《魔物獵人荒野》無限編輯角色、艾路貓模組

想改造型...玩家自製《魔物獵人荒野》無限編輯角色、艾路貓模組

蹲了200話!韓紳士漫《社團學姊》封面女主李舒欣if線終於開始

蹲了200話!韓紳士漫《社團學姊》封面女主李舒欣if線終於開始

ALP紳士漫改動畫《例行性活動》3/28發售!再塗鴉《孤獨搖滾》喜多郁代

ALP紳士漫改動畫《例行性活動》3/28發售!再塗鴉《孤獨搖滾》喜多郁代

有警告但不多...《刺客教條:暗影者》首遇鳥居系統提示:不攀爬以示尊敬

有警告但不多...《刺客教條:暗影者》首遇鳥居系統提示:不攀爬以示尊敬

Steam 97%極好評《彌助模擬器》上市!百元有找一小時可全破

Steam 97%極好評《彌助模擬器》上市!百元有找一小時可全破

網紅黃小潔正式撕膜「羽衣媽媽痛車」 打造影片之收益將以抖內形式歸還

網紅黃小潔正式撕膜「羽衣媽媽痛車」 打造影片之收益將以抖內形式歸還

抖肉!卡牌紳士《胖次卡片》繁中步兵版推出 現在輪到吾去脫她衣

抖肉!卡牌紳士《胖次卡片》繁中步兵版推出 現在輪到吾去脫她衣

樂意代理《SF Online》正式開服但帳號無法轉移!拉美特發聲明回擊立場

樂意代理《SF Online》正式開服但帳號無法轉移!拉美特發聲明回擊立場

DEI支持者喜稱《魔物獵人荒野》聲優為非二元性別 Grummz:沒人在乎

DEI支持者喜稱《魔物獵人荒野》聲優為非二元性別 Grummz:沒人在乎