前言 : 

最近終於找到工作了(灑花

不過公司有夠遠，就算騎腳踏車(所有不才能夠使用的交通工具中最快的)也要半小時左右

.

不過工作目前還蠻輕鬆的

(應該是)不用加班

程式碼看起來也還算乾淨

可喜可賀

.

---

正文 : 

https://www.youtube.com/watch?v=qv6UVOQ0F44

話說最近看到這個影片

(如果會過來這邊的估計都有看過這影片吧

.

簡單來說，就是透過機器學習的方式

讓電腦自動玩模擬器內的遊戲

.

遊戲畫面內左上角的圖是電腦實際看到的東西

後來翻了下程式碼是透過記憶體位址去抓的樣子，不是用截圖看顏色的方式

白色是障礙物

黑色是敵人，或是道具

.

右邊是可以按的按鈕

.

然後中間各種顏色的線

看起來像機器學習出來的線(不才不太確定)

只要在線上面有物件

就會觸發按鈕

.

例如說如果螢幕上從左邊數來第三格

由上往下數第五個有東西

就觸發按鈕A...的樣子

.

如果不才是透過牆壁上或是桌子上有東西

才會連想到該撿起地板上的東西

估計會被打死吧wwwww

.

雖然這也算是機器學習的一種就是了

如果以不能把遊戲規則(包含這是橫向卷軸遊戲這件事)寫在程式碼內的話

目前也沒想出有啥比較好的方式

.

簡單來說設定Fitness數字越高(表示人物走到越右邊，也就越接近終點)

就代表越結果越成功

然後失敗條件就是死掉或是待在同個地方太久

.

在每次失敗後都會修正參數

例如修正觸發按鈕的位置等等

.

技術部分說完了

接下來來說一下該怎麼建置環境

.

因為建置環境有點麻煩

所以不才全部包成一份直接給大家使用

.

https://drive.google.com/open?id=0B3hpPe6AAVmzR0RaLVh0Y3l2akE

傳送門

.

首先先打開程式(EmuHawk.exe)

.

然後把NES_ROM 資料夾裡面的遊戲

Super Mario Bros..nes

或是 Super Mario World (USA).smc

其中一個拖移到視窗中

就會在

.

然後點開模擬器中的Tool >> Lua

.

就會出現視窗

簡單來說這個視窗是跑腳本用的

然後把Lua_MachineLearngin >> neatevolve.lua 拖曳進去

.

如果沒問題的話就會開始跑了

然後會多出一個視窗

.

這個是控制台的部分

點開"show Map " 可以看到機器人看到的地圖(左邊有黑白格子的那個)

點開"Show M-Rates" 可以看到下面的參數

.

然後就開始給他跑吧

電腦一開始很笨，連要按按鈕都不知道

不過之後會開始學習

跑個幾百次後就會開始知道要往右邊移動

.

不過不知道為啥就算有存檔

下一次打開腳本時還是會重新學習

.

然後如果覺得跑得有夠慢，可以打開模擬器的View>> speed

我是直接調成400%，不然會跑到天荒地老

快轉對學習結果不會有影響

.

以上

.

然後如果希望機器學習玩其他關卡

要自己玩到那一關後

選擇File >> SaveState

.

遊戲存檔應該是放在NES 或是 SNES 的State 資料夾內

然後改存檔名稱和副檔名

附檔名要記得改，原本的State是大寫，要改成小寫

.

如果是Super Mario Bros..nes就改 SMB1-1.state 

如果是 Super Mario World (USA).smc 就改 DP1.state

.

目前只支援這兩款遊戲

看之後作者會不會新增其他遊戲吧

.

以上

.

然後之後如果有時間再翻一下程式碼好了

.