黃士傑返台分享AlphaGo Zero開發過程 - 圍棋
By Hamiltion
at 2017-11-09T23:06
at 2017-11-09T23:06
Table of Contents
※ 引述《tlchen (台灣加油)》之銘言:
: ※ 引述《qweewqq (風一樣的男子)》之銘言:
: : DeepMind指出,他們不使用任何人類知識,AlphaGo Zero用上的是新的「強化學習」方法
: 對於 "不使用任何人類知識" 這句, 我心中始終有個大問號.
: 首先, 在一開始的 random play, AZ 根本不知何時要停.
: 必須人工設定去停它. 這用到了人類知道這樣的遊戲, 應該有限步要停.
: 雖然 AZ 的參數是經由自我對戰學的, 但整個架構呢?
: 要有幾層的的類神經網路? 每層有多少節點? 層跟層間的結構?
: covolution 要用 5x5 還是怎樣的大小?
: 要怎樣配合 VN, PN? 要用 MCTS 來尋找?
: 這些都沒用到人類的圍棋知識嗎?
: 這整個大架構, 是在學人類棋譜時, 發現這樣的架構, 可以訓練出不錯的 AI.
: 這架構不是隨便設就行得通的吧?
: 經由人類棋譜訓練, 找到一個好的大架構, 這樣可以稱作不使用人類知識?
: 如果今天一個完全不懂圍棋的人, 只針對規則, 就去訂了大模型架構,
: 然後經由自我對戰去學參數. 這樣的結果, 那叫做不使用任何人類圍棋知識.
: 現在這樣算嗎? 我心中實在有很大的黑人問號.
1.
AGZ 怎會不知何時要停? 何必需要什麼特別人工設定它? 跟第一盤或第幾盤也沒關係
給定圍棋規則(禁自盡 禁同型)
即使你2個人類對下 到最後雙方再無可著手的時候就是終局(你可以找個人試試)
這跟機器或人類無關
1. 原po 一直在搞混人類知識跟人類圍棋知識
所謂人類圍棋知識 是專指人類"在棋盤上"的著手 應法 思考 這叫圍棋知識(不包括基本規則)
AGZ "就算有" 建立在之前 AlphaGo的基礎上 比如說要用 幾層類神經網路 MCTS 或其它
"人類工程上"的知識 但這些跟"人類圍棋知識" 並不相同 基本上這個是工程問題 數學問題 主是跟棋盤大小
圍棋規則 及圍棋本質等相關的東西 而跟人類"棋盤上的著法"無關
基本上你搞混了 build time 跟 run time
AGZ的工程師懂或不懂圍棋也不重要(他要懂基本規則) 他不需要是一張白紙
除非AGZ 的設計者有把 什麼不屬於基本規則的想法寫入程式 如征子 定石 手順等等
不然AGZ 本來就沒用到"人類圍棋知識"
就是只給定基本規則 所有的著法都可以 所有的著法都是自我對戰發現改良的
它訓練過程根本沒看過人類下棋 沒跟人對下
總之
人類工程上對圍棋的知識(解法 演算法 設計等) \= 人類圍棋知識
寫出一個GAME 不代表我在玩這個GAME時是天下無敵
在GAME裡面無敵不表示我能寫出這個GAME
一個是 build time 一個是 run time
這兩個意義也不同 不要搞混
如果你今天要把人類只要跟圍棋有關的東西都叫人類圍棋知識了
把所有東西都定義進來 這就沒什麼好講的
(至於你一直說AGZ大架構有沒有用到人類的圍棋知識,
如果AGZ 只針對圍棋的基本規則去設計 優化 那就沒有用到
如果AGZ 有針對盤面特定結構去設計 優化 那就是有)
--
Sent from my Windows
--
: ※ 引述《qweewqq (風一樣的男子)》之銘言:
: : DeepMind指出,他們不使用任何人類知識,AlphaGo Zero用上的是新的「強化學習」方法
: 對於 "不使用任何人類知識" 這句, 我心中始終有個大問號.
: 首先, 在一開始的 random play, AZ 根本不知何時要停.
: 必須人工設定去停它. 這用到了人類知道這樣的遊戲, 應該有限步要停.
: 雖然 AZ 的參數是經由自我對戰學的, 但整個架構呢?
: 要有幾層的的類神經網路? 每層有多少節點? 層跟層間的結構?
: covolution 要用 5x5 還是怎樣的大小?
: 要怎樣配合 VN, PN? 要用 MCTS 來尋找?
: 這些都沒用到人類的圍棋知識嗎?
: 這整個大架構, 是在學人類棋譜時, 發現這樣的架構, 可以訓練出不錯的 AI.
: 這架構不是隨便設就行得通的吧?
: 經由人類棋譜訓練, 找到一個好的大架構, 這樣可以稱作不使用人類知識?
: 如果今天一個完全不懂圍棋的人, 只針對規則, 就去訂了大模型架構,
: 然後經由自我對戰去學參數. 這樣的結果, 那叫做不使用任何人類圍棋知識.
: 現在這樣算嗎? 我心中實在有很大的黑人問號.
1.
AGZ 怎會不知何時要停? 何必需要什麼特別人工設定它? 跟第一盤或第幾盤也沒關係
給定圍棋規則(禁自盡 禁同型)
即使你2個人類對下 到最後雙方再無可著手的時候就是終局(你可以找個人試試)
這跟機器或人類無關
1. 原po 一直在搞混人類知識跟人類圍棋知識
所謂人類圍棋知識 是專指人類"在棋盤上"的著手 應法 思考 這叫圍棋知識(不包括基本規則)
AGZ "就算有" 建立在之前 AlphaGo的基礎上 比如說要用 幾層類神經網路 MCTS 或其它
"人類工程上"的知識 但這些跟"人類圍棋知識" 並不相同 基本上這個是工程問題 數學問題 主是跟棋盤大小
圍棋規則 及圍棋本質等相關的東西 而跟人類"棋盤上的著法"無關
基本上你搞混了 build time 跟 run time
AGZ的工程師懂或不懂圍棋也不重要(他要懂基本規則) 他不需要是一張白紙
除非AGZ 的設計者有把 什麼不屬於基本規則的想法寫入程式 如征子 定石 手順等等
不然AGZ 本來就沒用到"人類圍棋知識"
就是只給定基本規則 所有的著法都可以 所有的著法都是自我對戰發現改良的
它訓練過程根本沒看過人類下棋 沒跟人對下
總之
人類工程上對圍棋的知識(解法 演算法 設計等) \= 人類圍棋知識
寫出一個GAME 不代表我在玩這個GAME時是天下無敵
在GAME裡面無敵不表示我能寫出這個GAME
一個是 build time 一個是 run time
這兩個意義也不同 不要搞混
如果你今天要把人類只要跟圍棋有關的東西都叫人類圍棋知識了
把所有東西都定義進來 這就沒什麼好講的
(至於你一直說AGZ大架構有沒有用到人類的圍棋知識,
如果AGZ 只針對圍棋的基本規則去設計 優化 那就沒有用到
如果AGZ 有針對盤面特定結構去設計 優化 那就是有)
--
Sent from my Windows
--
Tags:
圍棋
All Comments
By Eden
at 2017-11-13T17:32
at 2017-11-13T17:32
By Adele
at 2017-11-17T00:58
at 2017-11-17T00:58
By Sandy
at 2017-11-20T11:45
at 2017-11-20T11:45
By Linda
at 2017-11-20T23:39
at 2017-11-20T23:39
By Olivia
at 2017-11-25T03:45
at 2017-11-25T03:45
By Hamiltion
at 2017-11-26T08:31
at 2017-11-26T08:31
By Zora
at 2017-11-30T02:46
at 2017-11-30T02:46
By Tristan Cohan
at 2017-12-04T14:33
at 2017-12-04T14:33
By Gilbert
at 2017-12-09T10:39
at 2017-12-09T10:39
By Audriana
at 2017-12-11T09:09
at 2017-12-11T09:09
By Thomas
at 2017-12-11T12:07
at 2017-12-11T12:07
By Andy
at 2017-12-14T23:07
at 2017-12-14T23:07
By Hazel
at 2017-12-19T04:12
at 2017-12-19T04:12
By Damian
at 2017-12-20T07:43
at 2017-12-20T07:43
By Belly
at 2017-12-22T12:24
at 2017-12-22T12:24
By Robert
at 2017-12-24T01:27
at 2017-12-24T01:27
By Lydia
at 2017-12-26T00:35
at 2017-12-26T00:35
By Jack
at 2017-12-26T12:42
at 2017-12-26T12:42
By Lily
at 2017-12-31T06:35
at 2017-12-31T06:35
By Damian
at 2018-01-02T00:18
at 2018-01-02T00:18
By Emma
at 2018-01-03T14:57
at 2018-01-03T14:57
By Regina
at 2018-01-04T17:31
at 2018-01-04T17:31
By John
at 2018-01-07T16:04
at 2018-01-07T16:04
By Kumar
at 2018-01-10T01:43
at 2018-01-10T01:43
By Catherine
at 2018-01-13T12:19
at 2018-01-13T12:19
By Hedda
at 2018-01-13T18:47
at 2018-01-13T18:47
By Joe
at 2018-01-14T04:38
at 2018-01-14T04:38
By Michael
at 2018-01-16T20:22
at 2018-01-16T20:22
By Kumar
at 2018-01-18T14:36
at 2018-01-18T14:36
By Kyle
at 2018-01-20T18:26
at 2018-01-20T18:26
By Hedda
at 2018-01-22T00:29
at 2018-01-22T00:29
By Annie
at 2018-01-23T14:26
at 2018-01-23T14:26
By Leila
at 2018-01-25T01:58
at 2018-01-25T01:58
By Blanche
at 2018-01-27T12:41
at 2018-01-27T12:41
By Skylar DavisLinda
at 2018-01-30T20:45
at 2018-01-30T20:45
By Ethan
at 2018-01-31T08:30
at 2018-01-31T08:30
By Rosalind
at 2018-02-03T13:37
at 2018-02-03T13:37
By Queena
at 2018-02-04T00:58
at 2018-02-04T00:58
By Hedwig
at 2018-02-06T00:22
at 2018-02-06T00:22
By Jack
at 2018-02-09T17:51
at 2018-02-09T17:51
By Zora
at 2018-02-11T04:28
at 2018-02-11T04:28
By Hedy
at 2018-02-16T02:30
at 2018-02-16T02:30
By Tristan Cohan
at 2018-02-19T04:17
at 2018-02-19T04:17
By Daniel
at 2018-02-19T11:39
at 2018-02-19T11:39
By Adele
at 2018-02-23T12:13
at 2018-02-23T12:13
By George
at 2018-02-25T16:03
at 2018-02-25T16:03
By Kumar
at 2018-03-01T16:25
at 2018-03-01T16:25
By Harry
at 2018-03-03T05:23
at 2018-03-03T05:23
By Margaret
at 2018-03-07T11:02
at 2018-03-07T11:02
By Rae
at 2018-03-11T04:10
at 2018-03-11T04:10
By Rae
at 2018-03-14T21:52
at 2018-03-14T21:52
By Yedda
at 2018-03-15T19:57
at 2018-03-15T19:57
By Hardy
at 2018-03-18T00:47
at 2018-03-18T00:47
By Kristin
at 2018-03-19T16:24
at 2018-03-19T16:24
By Xanthe
at 2018-03-21T20:03
at 2018-03-21T20:03
By Cara
at 2018-03-23T00:04
at 2018-03-23T00:04
By Linda
at 2018-03-25T04:41
at 2018-03-25T04:41
By Kristin
at 2018-03-27T04:09
at 2018-03-27T04:09
By Skylar Davis
at 2018-03-29T06:34
at 2018-03-29T06:34
By Cara
at 2018-04-02T16:14
at 2018-04-02T16:14
By Rae
at 2018-04-06T09:46
at 2018-04-06T09:46
By Linda
at 2018-04-06T21:44
at 2018-04-06T21:44
By Dora
at 2018-04-11T13:21
at 2018-04-11T13:21
By Jack
at 2018-04-13T05:01
at 2018-04-13T05:01
By Erin
at 2018-04-18T03:20
at 2018-04-18T03:20
By Emma
at 2018-04-18T16:35
at 2018-04-18T16:35
By Donna
at 2018-04-19T14:26
at 2018-04-19T14:26
By Hedy
at 2018-04-24T08:07
at 2018-04-24T08:07
By Skylar DavisLinda
at 2018-04-28T20:16
at 2018-04-28T20:16
By Michael
at 2018-05-02T08:49
at 2018-05-02T08:49
By Damian
at 2018-05-03T02:50
at 2018-05-03T02:50
By Yuri
at 2018-05-07T00:11
at 2018-05-07T00:11
By Rebecca
at 2018-05-09T11:49
at 2018-05-09T11:49
By Erin
at 2018-05-11T13:41
at 2018-05-11T13:41
By Linda
at 2018-05-15T22:26
at 2018-05-15T22:26
By Jacky
at 2018-05-19T18:22
at 2018-05-19T18:22
By Ursula
at 2018-05-23T19:02
at 2018-05-23T19:02
By Carolina Franco
at 2018-05-27T03:41
at 2018-05-27T03:41
By Jacky
at 2018-05-30T20:12
at 2018-05-30T20:12
By Lydia
at 2018-06-04T03:01
at 2018-06-04T03:01
By Olive
at 2018-06-07T00:20
at 2018-06-07T00:20
By Edith
at 2018-06-07T06:35
at 2018-06-07T06:35
By James
at 2018-06-10T19:17
at 2018-06-10T19:17
By Hamiltion
at 2018-06-14T20:10
at 2018-06-14T20:10
By Steve
at 2018-06-14T21:34
at 2018-06-14T21:34
By Ethan
at 2018-06-15T22:46
at 2018-06-15T22:46
By Harry
at 2018-06-18T15:49
at 2018-06-18T15:49
By Regina
at 2018-06-21T02:17
at 2018-06-21T02:17
By Andrew
at 2018-06-24T16:06
at 2018-06-24T16:06
By Sandy
at 2018-06-29T10:51
at 2018-06-29T10:51
By Margaret
at 2018-07-01T15:35
at 2018-07-01T15:35
By Barb Cronin
at 2018-07-02T16:10
at 2018-07-02T16:10
By Irma
at 2018-07-03T14:05
at 2018-07-03T14:05
By Ivy
at 2018-07-04T00:36
at 2018-07-04T00:36
By Lydia
at 2018-07-05T07:45
at 2018-07-05T07:45
By Hedwig
at 2018-07-06T13:23
at 2018-07-06T13:23
By Xanthe
at 2018-07-11T08:06
at 2018-07-11T08:06
By Jacob
at 2018-07-13T06:19
at 2018-07-13T06:19
By Kama
at 2018-07-13T16:41
at 2018-07-13T16:41
By Catherine
at 2018-07-16T17:39
at 2018-07-16T17:39
By Skylar Davis
at 2018-07-20T15:45
at 2018-07-20T15:45
By Mary
at 2018-07-21T15:52
at 2018-07-21T15:52
By Emma
at 2018-07-24T16:34
at 2018-07-24T16:34
By Michael
at 2018-07-28T15:21
at 2018-07-28T15:21
By Brianna
at 2018-07-29T16:17
at 2018-07-29T16:17
By Regina
at 2018-08-01T16:08
at 2018-08-01T16:08
By Olive
at 2018-08-04T09:57
at 2018-08-04T09:57
By Necoo
at 2018-08-05T10:54
at 2018-08-05T10:54
By Steve
at 2018-08-07T22:39
at 2018-08-07T22:39
By Jacky
at 2018-08-12T16:01
at 2018-08-12T16:01
By Valerie
at 2018-08-16T01:22
at 2018-08-16T01:22
By Adele
at 2018-08-20T14:36
at 2018-08-20T14:36
By Ursula
at 2018-08-21T17:03
at 2018-08-21T17:03
By Annie
at 2018-08-22T10:39
at 2018-08-22T10:39
By Todd Johnson
at 2018-08-25T08:39
at 2018-08-25T08:39
By Ophelia
at 2018-08-30T00:15
at 2018-08-30T00:15
By Bennie
at 2018-09-03T07:51
at 2018-09-03T07:51
By Charlotte
at 2018-09-04T19:42
at 2018-09-04T19:42
By Kama
at 2018-09-08T18:26
at 2018-09-08T18:26
By Noah
at 2018-09-13T07:39
at 2018-09-13T07:39
By Sarah
at 2018-09-15T22:35
at 2018-09-15T22:35
By Olivia
at 2018-09-16T12:55
at 2018-09-16T12:55
By Carolina Franco
at 2018-09-20T13:35
at 2018-09-20T13:35
By Mason
at 2018-09-23T17:56
at 2018-09-23T17:56
By Mason
at 2018-09-25T18:30
at 2018-09-25T18:30
By Mia
at 2018-09-28T13:23
at 2018-09-28T13:23
By Audriana
at 2018-09-30T14:42
at 2018-09-30T14:42
By Skylar Davis
at 2018-10-04T08:32
at 2018-10-04T08:32
By Valerie
at 2018-10-06T12:27
at 2018-10-06T12:27
By Mason
at 2018-10-07T18:20
at 2018-10-07T18:20
By Quanna
at 2018-10-09T18:30
at 2018-10-09T18:30
By Frederic
at 2018-10-12T18:07
at 2018-10-12T18:07
By Rae
at 2018-10-16T06:43
at 2018-10-16T06:43
By Damian
at 2018-10-18T14:58
at 2018-10-18T14:58
By James
at 2018-10-19T16:09
at 2018-10-19T16:09
By Hazel
at 2018-10-23T23:59
at 2018-10-23T23:59
By Ethan
at 2018-10-28T18:07
at 2018-10-28T18:07
By Kumar
at 2018-11-01T05:40
at 2018-11-01T05:40
By William
at 2018-11-05T23:44
at 2018-11-05T23:44
By Oscar
at 2018-11-07T14:22
at 2018-11-07T14:22
By Olive
at 2018-11-11T05:53
at 2018-11-11T05:53
By Susan
at 2018-11-15T03:32
at 2018-11-15T03:32
By Carol
at 2018-11-18T00:11
at 2018-11-18T00:11
By Olive
at 2018-11-18T02:43
at 2018-11-18T02:43
Related Posts
CGI死活強度
By Joe
at 2017-11-08T21:33
at 2017-11-08T21:33
黃士傑返台分享AlphaGo Zero開發過程
By Christine
at 2017-11-08T20:23
at 2017-11-08T20:23
有適合小朋友初學棋的影片嗎?
By Wallis
at 2017-11-08T15:50
at 2017-11-08T15:50
某安是不是自我感覺太過良好?
By Enid
at 2017-11-07T18:41
at 2017-11-07T18:41
[棋訊] 第22屆三星杯世界圍棋公開賽4強
By Enid
at 2017-11-07T10:48
at 2017-11-07T10:48