【オセロ,将棋】ボードゲーム Part2【囲碁,War】

**名前は開発中のものです。** · 2017/10/15(日) 17:34:58.03

比較的地味なボードゲーム専用のスレが欲しくて立ててみました。

前スレ
【オセロ,将棋】ボードゲーム【囲碁,War】
http://mevius.2ch.net/test/read.cgi/gamedev/1057763418/

**535** · 2019/02/03(日) 20:43:10.48

(;SZ[19]
;B[jj];W[ij];B[ik];W[hk];B[hj];W[ii];B[hl];W[jk]
;B[gk];W[hi];B[jl];W[kk];B[gi];W[km];B[kl];W[im]
;B[il];W[gl];B[gm];W[fl];B[ki];W[fn];B[lk];W[mk]
;B[fk];W[lh];B[kj];W[jn];B[kk];W[mg];B[hk];W[ng]
;B[jk])

**535** · 2019/02/04(月) 21:24:20.28

コア数が足りていたとしても性能が落ちるのは
ターボブーストが利かなくなる分クロックが落ちるということだろうか？

**535** · 2019/02/04(月) 21:32:25.91

単独で学習流すと１エポック5000秒強くらいだが棋譜取りと並列にすると1エポック8000秒弱かかる。
結構違いますね。

**535** · 2019/02/05(火) 19:35:44.19

自分からすぐ取られる手を打たない、必敗の手順をちゃんと読む、などの地味な改良をした結果だいぶ改善したようです。

38局目
黒(airandom.dll)の勝利回数: 37
白(ai-lv1.dll)の勝利回数: 1

28局目
黒(airandom.dll)の勝利回数: 28
白(ai-lv2.dll)の勝利回数: 0

30局目
黒(airandom.dll)の勝利回数: 12
白(ai-lv3.dll)の勝利回数: 18

**535** · 2019/02/05(火) 19:37:52.43

そろそろ白番もちゃんと動くようにしなければ…

**535** · 2019/02/05(火) 20:01:16.79

白番が動かないことには自己対局による強化学習も不可能…

**535** · 2019/02/05(火) 20:07:09.73

>>676の棋譜を見ていますが自分からすぐ取られる手を打たなくしたはずなのですが打ってますね。。。
バグか。

**535** · 2019/02/05(火) 20:47:39.46

すげぇぇぇええええぇえ！
ゲタ打った！！！

(;SZ[19]
;B[jj];W[ji];B[ki];W[ii];B[ik];W[kh];B[jh];W[kj]
;B[li];W[hi];B[lh];W[mg];B[kk];W[lj];B[mi];W[mj]
;B[ni];W[ij];B[jk];W[hk];B[nk];W[gl];B[kg];W[fm]
;B[en];W[hm];B[gj];W[il];B[mh];W[hh];B[hj];W[gi]
;B[oh];W[fi];B[ih];W[ei];B[di];W[jg];B[nh];W[ig]
;B[kh])

**535** · 2019/02/05(火) 20:55:47.56

ゲタなんか一切教えてないのにゲタ打った。
この衝撃がみんなに伝わるかなぁ。

**535** · 2019/02/05(火) 21:18:10.97

あれ、ネットワークのファイル更新したらLV2に負けるようになっちゃった。
なぜ？

**535** · 2019/02/05(火) 23:23:47.50

ネットワークじゃなくて序盤DBがおかしいのかなぁ。

**310** · 2019/02/06(水) 01:11:54.97

久々です。

置換表は、だいぶ前にリハッシュ対応して、この辺にしとこうか状態になってます。
多分unordered_mapの仕組みはそこそこ理解できたと思います。
deleteとガベージコレクション、iteratorを除いてですが。

Edaxのソースを解析しようと、VC++で読み込んでみましたが、Edaxは裸のCで…
_s地獄とコンパイラの違いで、動かすところまで持ち込むのが相当大変な感じ。
一番の地獄は、探索部のソースを見ても何がなんだかわからない事。
せめて偶数理論のところは見つけたいんだけど。滅茶諦めモード。

というわけで、記譜作成を動かし続けるしかなくなってしまいましたorz

WZebraのソースが見たい…。

**310** · 2019/02/06(水) 01:14:08.23

>>675
メモリバスの帯域とか、L2キャッシュ溢れとか…
わかっているけど、エビデンスが取れないので、認められないorz

**535** · 2019/02/06(水) 20:19:19.81

ゲタっぽい手また打った。
パッと見成立しないんだけど、なんとなく味が悪いことわかってるんだな。
すごい！

(;SZ[19]
;B[jj];W[ji];B[ki];W[ij];B[ii];W[jk];B[jh];W[li]
;B[kk];W[kg];B[ik];W[jl];B[hj];W[lj];B[lh];W[hl]
;B[jg];W[if];B[mk];W[lk];B[ll];W[kl];B[kj];W[lm]
;B[ml];W[mm];B[mi];W[il];B[mj];W[gj];B[nj];W[lj]
;B[li];W[jm];B[lk];W[oi];B[ij];W[pi];B[lj])

>>685
マルチ性能も大事だけどシングル性能も結構大事で
並列計算するか結構悩みどころですね。
学習結果が早くほしい時は棋譜取りしないというのもありっちゃあり。

**535** · 2019/02/06(水) 21:11:19.34

ん、なんかいままでは序盤DBの力で勝ってきたようなものだけど、
むしろ中盤力のほうが勝り始めてる気がする。
序盤DBが物足りなく感じる。。。

**535** · 2019/02/06(水) 21:50:52.85

いろいろ試してみたくなるけど、やっぱ棋譜取りがすべての源泉な気がする。
日中は棋譜取りに専念するのが吉か？

**535** · 2019/02/07(木) 21:28:54.73

やはり更なる上を目指すには強化学習が必須か？

**535** · 2019/02/07(木) 21:49:04.85

どうやっても勝ちってかんじではあるけど
１７手目が面白い手でうまく必勝形につなげた。
正直この手は俺にも見えてなかった。

(;SZ[19]
;B[jj];W[ij];B[ii];W[hi];B[ik];W[ih];B[hj];W[gh]
;B[gi];W[fj];B[hh];W[hg];B[fh];W[jl];B[gg];W[kk]
;B[kh];W[ig];B[li];W[fi];B[mi];W[ji];B[jh];W[km]
;B[ki];W[ln];B[hi];W[mn];B[ji])

**310** · 2019/02/08(金) 00:11:00.05

偶数理論なかなか良い実装を思いつきました。

オーバーヘッドが極小なのは、オーダリングへ影響する値だけゼロにして、
ほぼ速度低下が無い事で確認済です。が…何をどうしても速度がダウンします。

というわけで、またしても偶数理論挫折。

次ネタ考え中。
ネタを一つ見つけたけど、結構全面改訂になりそう。

**535** · 2019/02/09(土) 16:38:22.33

なんかひと段落ついちゃったら次何すればいいかわかんなくなっちゃったな。
とりあえず、棋譜取りだけは地味に続けるけど。

**535** · 2019/02/09(土) 16:39:13.34

白番がバグってるの直すのあったなそういえば。。。

**310** · 2019/02/09(土) 21:06:41.89

次ネタ結構大変だと思ったら、意外と簡単にできた。
FFO40-49のタイムは３０％強短縮した。
FFO40が悪化して、49はだいぶ短縮しているので、探索深さが深い方が
効果が出る傾向に見える。という事は、残り２８か所空きをやっている棋譜
作成では、もっと改善する可能性あるかも。

思い込みって怖い。正直、何故今まで思い付かなかったのだろうというレベルorz

**535** · 2019/02/10(日) 00:11:19.28

白番動くようになったみたいです。
白番でLV2に勝ちました！

(;SZ[19]
;B[ef];W[eg];B[fg];W[fh];B[eh];W[dg];B[gh];W[fi]
;B[gf];W[di];B[df];W[fe];B[cg];W[dh];B[gi];W[ff]
;B[gg];W[ge];B[hi];W[ej];B[ij];W[de];B[hd];W[hj]
;B[he];W[if];B[hf];W[ih];B[hh];W[ig];B[hc];W[hg]
;B[gj];W[hk];B[gl];W[gk];B[fj];W[ei];B[cd];W[cf]
;B[jk];W[kl];B[ed];W[ee];B[ek];W[dj];B[jh];W[dk]
;B[il];W[df])

**310** · 2019/02/10(日) 09:57:20.94

パラメータの調整というか、使い方変えたら、更に５％くらい改善。

残り２８手空きの記譜作成は、トータル倍弱まで速度アップした模様。
とはいえｌ、記譜作成の方は、解く問題によってばらつきが大きすぎる
ので、もう少し様子を見ないと、どれくらい早くなったかはなんとも
言えない。早くなったのは確実。

さて、またネタが無くなった（汗

**535** · 2019/02/10(日) 14:13:32.91

分かってたつもりだったけどLV２の黒番のうち筋が思ったより良くて、
序盤DBに取り込んでもいいかなってちょっと思うようになった。

**535** · 2019/02/10(日) 14:38:22.21

lv2 vs lv3で棋譜取りしてlv2のいいところを抽出しようとしたら
lv3が強すぎてlv2のいいところが取れないっぽいんだがｗｗｗｗ
これは計算外

**535** · 2019/02/10(日) 16:41:39.34

lv2 vs lv3はlv2の勝率が3割3分くらい。
思ったよりはlv2が善戦してるかな？

**535** · 2019/02/11(月) 00:03:36.62

lv2の棋譜を取り込んで対戦統計とり始めました。

15局目
黒(airandom.dll)の勝利回数: 13
白(ai-lv1.dll)の勝利回数: 2

14局目
黒(airandom.dll)の勝利回数: 14
白(ai-lv2.dll)の勝利回数: 0

7局目
黒(airandom.dll)の勝利回数: 0
白(ai-lv3.dll)の勝利回数: 7

10局目
黒(ai-lv1.dll)の勝利回数: 1
白(airandom.dll)の勝利回数: 9

6局目
黒(ai-lv2.dll)の勝利回数: 3
白(airandom.dll)の勝利回数: 3

6局目
黒(ai-lv3.dll)の勝利回数: 3
白(airandom.dll)の勝利回数: 3

lv1には文句なく勝ってますね。
lv2もトータル勝ち越せるかも。
lv3は白番でいい勝負なのはすごいですが、
黒番で勝ててないのが気になりますね。

**535** · 2019/02/11(月) 19:03:47.89

黒番対lv2は勝率100% w
序盤DBが完全に筋に入ってる感じですかね。
対lv3の戦績もlv2 vs lv3の戦績と比較して決して悪くないです。

40局目
黒(airandom.dll)の勝利回数: 36
白(ai-lv1.dll)の勝利回数: 4

42局目
黒(airandom.dll)の勝利回数: 42
白(ai-lv2.dll)の勝利回数: 0

25局目
黒(airandom.dll)の勝利回数: 9
白(ai-lv3.dll)の勝利回数: 16

50局目
黒(ai-lv1.dll)の勝利回数: 7
白(airandom.dll)の勝利回数: 43

30局目
黒(ai-lv2.dll)の勝利回数: 22
白(airandom.dll)の勝利回数: 8

33局目
黒(ai-lv3.dll)の勝利回数: 24
白(airandom.dll)の勝利回数: 9

**535** · 2019/02/11(月) 21:10:52.87

でも悲しいことに俺のAIには怖さがないんだよなぁ。
ちょっと気を抜くと負かされてしまうような怖さが。
lv2とlv3にはそれがある。

**535** · 2019/02/12(火) 20:26:23.49

こんな感じです。

50局目
黒(airandom.dll)の勝利回数: 45
白(ai-lv1.dll)の勝利回数: 5

50局目
黒(airandom.dll)の勝利回数: 50
白(ai-lv2.dll)の勝利回数: 0

40局目
黒(airandom.dll)の勝利回数: 14
白(ai-lv3.dll)の勝利回数: 26

50局目
黒(ai-lv1.dll)の勝利回数: 7
白(airandom.dll)の勝利回数: 43

48局目
黒(ai-lv2.dll)の勝利回数: 39
白(airandom.dll)の勝利回数: 9

46局目
黒(ai-lv3.dll)の勝利回数: 32
白(airandom.dll)の勝利回数: 14

ホントは全部50局打ちたかったんだけど時間がかかるので打ち切りました。

**535** · 2019/02/13(水) 19:55:00.78

DNNの教師データを棋譜からの生勝率ではなく、少し探索した結果にしてみようかと思ってます。

**535** · 2019/02/14(木) 22:04:12.79

なんか変な手打つorz
結局、生勝率が一番いいのかな…

**名前は開発中のものです。** · 2019/02/15(金) 23:01:57.18

>>684
https://github.com/okuhara/edax-reversi-AVX
は VC でもコマンドラインならビルド可能です。(NMakefile)
（本家の Edax も NMakefile は付いているが、多少変更が必要）
Edax の偶数は基本的に Zebra と同じ。QUADRANT_ID あたりを追ってみては？

**310** · 2019/02/15(金) 23:44:55.03

>>706
情報ありがとうございます。そのソースなのですが、コマンドラインなのですね。

ビルドしたかった理由はデバッグモードを使いたかったからです。
QUADRANT_IDのあたりは追っかけたのですが、もともとの探索の構造が
読めなくて、デバッグモードに頼ろうとした次第です。

で、処理内容を予想して自分で組んでみたのですが、FFOテストでは速度が
若干ですが、落ちてしまうのです。

あと、実はVC++しか使った事ないというか、オセロ開発でC++使い始めたので、
makefileが何やってるのかわからないです（汗
というわけで、ちと調べてみます。
動くだけでも、自動対戦の相手になってもらえる可能性ありますから。

**535** · 2019/02/16(土) 00:14:31.55

310さんってC++のエキスパートなのかと思ってたっす。
ちょっと意外。

**535** · 2019/02/17(日) 21:11:39.54

ネタがなくなってちょっと熱も冷めた感じ。
とりあえず、自己対局による強化学習をぼちぼち何とかしたい。

**535** · 2019/02/18(月) 23:23:00.57

俺のAI vs 俺のAIの棋譜

(;SZ[19]
;B[jj];W[kj];B[kk];W[ji];B[lj];W[ki];B[ij];W[lk]
;B[ll];W[mk];B[ii];W[ml];B[mm];W[nn];B[hh];W[gg]
;B[oo];W[on];B[ih];W[nm];B[po];W[mj];B[nk];W[ok]
;B[ol];W[ni];B[nl];W[mo];B[ln];W[mn];B[lm];W[li]
;B[hk];W[oj];B[oi];W[pi];B[oh];W[qj];B[pk];W[nj]
;B[pj];W[pl];B[il];W[qk];B[in];W[pj];B[im];W[lj])

両当たりかけられるところを放置したり抜かなくていい石を抜いたりいろいろ危なっかしいところはあるが
現状、こんな感じです。

**535** · 2019/02/19(火) 22:08:59.80

いまよりもっと人工知能技術が普及して働き口が増えたら人工知能系の職に転職したいｗｗｗ

**535** · 2019/02/19(火) 22:42:38.22

次のアイディアが出るまで

対LV3の棋譜をとる→序盤DBを更新する→DNNを更新する→対LV３の棋譜をとる

のサイクルを繰り返すことにします。

**535** · 2019/02/20(水) 21:16:37.27

珍しい負け方した。
白必勝形のダブルリーチ
この形は非常に珍しいと思う。

(;SZ[19]
;B[jj];W[kk];B[ki];W[ik];B[ii];W[hi];B[ij];W[jk]
;B[hk];W[hl];B[gj];W[hj];B[gk];W[gl];B[jl];W[gi]
;B[fi];W[jm];B[kl];W[km];B[ll];W[im];B[fm];W[lm]
;B[hh];W[mm];B[hm];W[lk];B[gh];W[hn];B[gm];W[mk]
;B[li];W[nl];B[om];W[ok];B[nj];W[nk])

**535** · 2019/02/21(木) 19:59:44.77

日に日にじわじわ強くなってる気がする。
どこかのタイミングで爆発的に強くなったりしないかな？

**310** · 2019/02/22(金) 00:24:39.77

ようやく評価関数が安定してきたのか、遡り記譜作成の速度が上がってきた気がする。

暇なので、mctsでも組んどこうかと考え始めたら、置換表の新アイデアが。

今までは、unordered_mapにとらわれていましたが、もともと探索木は文字通り
ツリー構造なので、その形のまんま置換表にして、探索しながら木を同時並行
でたどっていけば、置換表内で「探す」必要が無い上に、着手リストがそのまま
ノードとして存在しているので、反復系の探索の時に何度もmobility関数を呼ぶ
必要が無い。

結構大掛かりな修正になりましたが、とりあえず基礎的な探索まではできるように
なりました。速度計測はこれから。

あと、shared_ptr使った事で、不要な置換表データを自動削除できるので、minMaxで
AIを組んだ時に、置換表を縮小しながら再利用できるかなと。
あ、mctsはどこに行ってしまったんだろう（汗

**535** · 2019/02/22(金) 20:49:26.61

10並列でLV3と対戦しました。

29局目黒(airandom.dll)の勝利回数: 15 白(ai-lv3.dll)の勝利回数: 14
32局目黒(airandom.dll)の勝利回数: 15 白(ai-lv3.dll)の勝利回数: 17
32局目黒(airandom.dll)の勝利回数: 20 白(ai-lv3.dll)の勝利回数: 12
34局目黒(airandom.dll)の勝利回数: 16 白(ai-lv3.dll)の勝利回数: 18
30局目黒(airandom.dll)の勝利回数: 12 白(ai-lv3.dll)の勝利回数: 18
32局目黒(airandom.dll)の勝利回数: 6 白(ai-lv3.dll)の勝利回数: 26
30局目黒(airandom.dll)の勝利回数: 12 白(ai-lv3.dll)の勝利回数: 18
33局目黒(airandom.dll)の勝利回数: 18 白(ai-lv3.dll)の勝利回数: 15
37局目黒(airandom.dll)の勝利回数: 17 白(ai-lv3.dll)の勝利回数: 20
32局目黒(airandom.dll)の勝利回数: 13 白(ai-lv3.dll)の勝利回数: 19
トータル 144勝 177敗
勝率 44.9%

これはLV2 vs LV3 と比べてかなりいい数字です！

**310** · 2019/02/23(土) 17:22:38.75

>>715の続き

良く考えたら、ツリー構造で自分の値を残しておくという意味で、mtd(f)や
反復深化の系統には効果あるけど、同じ局面を見つける事ができないので
そもそも置換表ではありませんねorz

その代り、並列探索でも排他制御をしなくて良い事になります。
メモリー使用量も少なくて済みます。

速度については、今のところ微妙。
棋譜作成が一段落したらPCリセットしてクリーンな状態で再計測の予定。

**535** · 2019/02/23(土) 19:16:16.09

対戦統計って１００００局くらいやらないと±10%くらいの誤差は簡単に出てしまうのかもしれない。
何局くらいやれば信頼できるんだろ？あんま統計詳しくないんだよな～

**535** · 2019/02/23(土) 19:28:15.18

そういえば「コンピュータ囲碁 ―モンテカルロ法の理論と実践」になんか書いてあったような気もする。

**535** · 2019/02/24(日) 21:49:18.42

なんか弱くなってる気がするorz
LV0とかLV1にも序盤不利になったりするorz
最終的に逆転できることもあるんだけど、そのまま押し切られることもあるorz
まずいでしょうこれはorz

**310** · 2019/02/24(日) 23:56:43.56

んごー。めっちゃスピードダウンorz
ダメ筋だったかも。

途中速度アップしてる気がしていたけど、単にバグっていただけだった。

置換表機能が消えて、余計な筋を読んでいるのか。
それとも、パラパラとmake_sharedしているからなのか。
どうせやる事ないので、しばし検討。

**535** · 2019/02/25(月) 20:30:16.25

もっとマシンパワーが欲しい！
モアパワー、モアトルクだ！

**535** · 2019/02/25(月) 20:48:25.65

大学で統計の単位とっとくんだったorz
独学は厳しいorz

**535** · 2019/02/26(火) 20:20:50.08

序盤DBはもう少し工夫しないと駄目かもなぁ

**535** · 2019/02/26(火) 22:16:04.17

あの伝説の手筋が実現しかけたが、残念ながら実現しなかった。
あとちょっとだったのに、悔しい！！

(;SZ[19]
;B[jj];W[jk];B[ki];W[ij];B[ik];W[hk];B[il];W[kj]
;B[ji];W[ih];B[hl];W[gm];B[ii];W[hi];B[gl];W[li]
;B[hh];W[ig];B[kk];W[ll];B[km];W[jl];B[jn];W[kl]
;B[lh];W[mg];B[lj];W[hj];B[gk];W[gh];B[lm];W[hf]
;B[he];W[kh];B[gi];W[hg];B[gj];W[jg];B[gg];W[lg]
;B[kf];W[fg];B[ef];W[kg];B[ng];W[gf];B[fe];W[gg])

**535** · 2019/02/26(火) 23:53:19.73

負けたけど、7連までの手数が絡んだ微妙な駆け引きが素晴らしい名局だった。
勝つチャンスはあったと思うけどな～惜しいな～

(;SZ[19]
;B[jj];W[kj];B[jk];W[ki];B[kk];W[kh];B[il];W[lk]
;B[ll];W[ml];B[in];W[ji];B[im];W[ih];B[nm];W[hi]
;B[jo];W[gi];B[li];W[fh];B[ij];W[ii];B[io];W[ei]
;B[ip];W[fi])

**535** · 2019/02/27(水) 21:30:22.80

モンテカルロ木探索とDNNと組み合わせてみようかなぁ
そのほうがランダム性も出せるし
でも遅くなったらやだな。うーん

**535** · 2019/02/27(水) 22:03:24.47

なんか取れないシチョウを追いかけたｗ
シチョウルーチンにバグがあるのか、DNNの評価値でシチョウを追いかけてしまったのかイマイチ判断がつかないな。

**535** · 2019/02/27(水) 22:47:59.69

ん、なんかLV2にコロコロ負けるようになった。
自分のAI vs lv 3 の棋譜を取り入れたせいで序盤DBが狂っちゃったかな。

**535** · 2019/02/28(木) 22:39:23.34

なんか新しいアイディアが欲しいな。
>>712のサイクルはちょっと手詰まり感。

**535** · 2019/03/04(月) 20:07:01.61

ここ数日さぼりっぱなし。
棋譜取りも逆に弱くなりそうでさぼってます。

**535** · 2019/03/04(月) 22:26:37.19

やっぱ序盤の大局観で優位に立ちたいんだよなぁ。
中盤、終盤はある程度読みでカバーできるけど序盤はマジ謎が多いからな。

**310** · 2019/03/04(月) 23:03:17.87

バグでドツボ中。

再現性がなさすぎて、よーわからん。
頻度の低さと、再現性の無さから、置換表の二重更新だと思うんだけど…
それっぽい箇所も見当たらない。

**535** · 2019/03/09(土) 21:06:39.62

完全にさぼり状態。
アイディアも枯渇したし。
どこかにネタ落ちてないかな。

**535** · 2019/03/10(日) 00:25:59.41

禁断の人間（俺）vs lv3の棋譜取りをやろうかと思ってます。
これは手間が半端ないｗ

**535** · 2019/03/10(日) 00:40:34.55

早くもギブアップｗｗｗｗｗ
なかなかいい棋譜が取れない
基本的に無理筋orz.

**535** · 2019/03/10(日) 20:17:25.17

自分のAI vs lv3 で　手筋炸裂！！
うって返しでました！

(;SZ[19]
;B[jj];W[ki];B[ii];W[kj];B[kk];W[ih];B[hh];W[gg]
;B[ll];W[mm];B[mk];W[jk];B[jl];W[ik];B[il];W[hk]
;B[hl];W[gl];B[gk];W[ji];B[hj];W[ij];B[jj];W[hi]
;B[jk];W[gi];B[ik];W[nk];B[lk];W[ok];B[hk])

**535** · 2019/03/11(月) 19:47:21.03

棋譜取り再開しました。
弱くなる可能性は潰せてないのですが、何もしないよりはましだと思って。

**535** · 2019/03/11(月) 21:55:27.12

10並列　対戦結果

30局目黒(airandom.dll)の勝利回数: 16 白(ai-lv3.dll)の勝利回数: 14
21局目黒(airandom.dll)の勝利回数: 10 白(ai-lv3.dll)の勝利回数: 11
29局目黒(airandom.dll)の勝利回数: 12 白(ai-lv3.dll)の勝利回数: 17
22局目黒(airandom.dll)の勝利回数: 6 白(ai-lv3.dll)の勝利回数: 16
24局目黒(airandom.dll)の勝利回数: 14 白(ai-lv3.dll)の勝利回数: 10
27局目黒(airandom.dll)の勝利回数: 14 白(ai-lv3.dll)の勝利回数: 13
27局目黒(airandom.dll)の勝利回数: 14 白(ai-lv3.dll)の勝利回数: 13
30局目黒(airandom.dll)の勝利回数: 15 白(ai-lv3.dll)の勝利回数: 15
23局目黒(airandom.dll)の勝利回数: 10 白(ai-lv3.dll)の勝利回数: 13
28局目黒(airandom.dll)の勝利回数: 13 白(ai-lv3.dll)の勝利回数: 15

トータル 124勝137敗勝率 47.5%

悪くない

**535** · 2019/03/12(火) 20:57:52.00

LV3に勝利。
途中負けかけたけど相手がミスした。
終盤の数手が素晴らしい一局だった。

(;SZ[19]
;B[jj];W[ki];B[ji];W[jh];B[ih];W[ig];B[kh];W[jg]
;B[kj];W[hf];B[li];W[kg];B[lg];W[gf];B[lk];W[mj]
;B[hi];W[fg];B[eg];W[mi];B[lf];W[lj];B[fi];W[gi]
;B[gj];W[gh];B[ej];W[fk];B[fj];W[ij];B[ik];W[ge]
;B[ii];W[hj];B[hk];W[fd];B[ki];W[me];B[ij];W[ne]
;B[hj])

**535** · 2019/03/12(火) 21:01:50.73

それにしてもディープラーニングの学習がメモリ20GB食ってるんだがｗ
奮発してメモリ32GBにしといてよかった。

やっぱハードウェア性能は正義だな。
Zen2のスリッパ出たらうっかり買いそうで自分が怖いｗ

**535** · 2019/03/13(水) 20:46:36.19

12並列対戦

29局目黒(airandom.dll)の勝利回数: 12 白(ai-lv3.dll)の勝利回数: 17
30局目黒(airandom.dll)の勝利回数: 17 白(ai-lv3.dll)の勝利回数: 13
28局目黒(airandom.dll)の勝利回数: 11 白(ai-lv3.dll)の勝利回数: 17
28局目黒(airandom.dll)の勝利回数: 10 白(ai-lv3.dll)の勝利回数: 18
36局目黒(airandom.dll)の勝利回数: 13 白(ai-lv3.dll)の勝利回数: 23
25局目黒(airandom.dll)の勝利回数: 11 白(ai-lv3.dll)の勝利回数: 14
31局目黒(airandom.dll)の勝利回数: 14 白(ai-lv3.dll)の勝利回数: 17
28局目黒(airandom.dll)の勝利回数: 13 白(ai-lv3.dll)の勝利回数: 15
32局目黒(airandom.dll)の勝利回数: 13 白(ai-lv3.dll)の勝利回数: 19
33局目黒(airandom.dll)の勝利回数: 17 白(ai-lv3.dll)の勝利回数: 16
31局目黒(airandom.dll)の勝利回数: 17 白(ai-lv3.dll)の勝利回数: 14
25局目黒(airandom.dll)の勝利回数: 8 白(ai-lv3.dll)の勝利回数: 17

156勝200敗　勝率　43.8%

弱くなったのか誤差の範囲なのか、うーん。

**535** · 2019/03/14(木) 23:27:52.29

>>742の棋譜を序盤DBに取り込んで、その序盤DBをもとにDNNの学習をやり足しました。
DNNは序盤DB拡張と学習のサイクルを繰り返し行っているので秘伝のタレみたいになってますｗ
これで今夜からもう一度対LV3対戦やってみます。

**535** · 2019/03/14(木) 23:40:56.98

7局目黒(airandom.dll)の勝利回数: 3 白(ai-lv3.dll)の勝利回数: 4
7局目黒(airandom.dll)の勝利回数: 4 白(ai-lv3.dll)の勝利回数: 3
7局目黒(airandom.dll)の勝利回数: 3 白(ai-lv3.dll)の勝利回数: 4
5局目黒(airandom.dll)の勝利回数: 4 白(ai-lv3.dll)の勝利回数: 1
7局目黒(airandom.dll)の勝利回数: 4 白(ai-lv3.dll)の勝利回数: 3
5局目黒(airandom.dll)の勝利回数: 3 白(ai-lv3.dll)の勝利回数: 2
4局目黒(airandom.dll)の勝利回数: 1 白(ai-lv3.dll)の勝利回数: 3
5局目黒(airandom.dll)の勝利回数: 3 白(ai-lv3.dll)の勝利回数: 2
9局目黒(airandom.dll)の勝利回数: 7 白(ai-lv3.dll)の勝利回数: 2
6局目黒(airandom.dll)の勝利回数: 4 白(ai-lv3.dll)の勝利回数: 2
6局目黒(airandom.dll)の勝利回数: 2 白(ai-lv3.dll)の勝利回数: 4
7局目黒(airandom.dll)の勝利回数: 4 白(ai-lv3.dll)の勝利回数: 3

42勝33敗　勝率56%

出だしは好調！
明日一日回してどうなるか… 👀
Rock54: Caution(BBR-MD5:1341adc37120578f18dba9451e6c8c3b)

**535** · 2019/03/14(木) 23:44:29.21

ありゃなんかRock54ついとる。
文章の繰り返しが駄目なんか？

**535** · 2019/03/15(金) 20:06:11.54

残念ながら駄目でしたorz

155勝 209敗　勝率 42.6%

やっぱ対局回数増やすとこの辺に落ち着くのか、うーん

**535** · 2019/03/16(土) 18:31:00.14

>>746から対戦を止めずに継続していましたが

211勝289敗勝率42.2%

となりました。

やっぱこの辺が真の値なのかな。

**535** · 2019/03/17(日) 00:52:38.93

更に学習を続けます

**535** · 2019/03/17(日) 21:35:48.21

まじでZen2スリッパでたら買ってしまいたい衝動に駆られる

**535** · 2019/03/18(月) 00:19:09.18

8勝2敗だと95%の確率で強いといえるらしいが、12並列もしてると１つは8勝2敗ぐらいになったりするw。
まあ確率的にはそうなのかも。
結局1000局くらいやらないと駄目ってことかな?

**535** · 2019/03/18(月) 21:25:08.42

やっぱ弱くなってるかもT△T

143勝 220敗　勝率　39.4%

このままこの学習サイクルを進めていいか迷うorz

**535** · 2019/03/18(月) 21:37:35.02

禁断のモンテカルロ木探索の封印を解くか？
しかしあれは計算時間が半端ないからな。
出来れば避けたい。

**535** · 2019/03/18(月) 21:52:51.93

プロのタイトル戦が7番勝負とかだけど7番ぽっちじゃ真の強者はわからんってことやなｗ

**535** · 2019/03/18(月) 23:53:39.58

モンテカルロ実装したけど、なんか素朴な手を選ぶようになってしまった。
うーん、コレジャナイ感がorz

**535** · 2019/03/19(火) 21:06:00.35

なんかおかしい。
LV3が強すぎる気がするｗ
もしかしてLV3には学習機能がついていて計算回せば回すほど強くなるとか？ｗ
んなわけないか。

**535** · 2019/03/21(木) 03:04:06.19

祝日だって油断してたらこんな時間ｗ
弱くなってもいいから計算量削る方向で調整しています。

**535** · 2019/03/21(木) 17:29:13.47

対戦統計とってます。

66勝 70敗　勝率48.5%

今のところむしろ勝率上がってます！
速度も若干だけど速くなったはず…

勝率50%が欲しい！

**535** · 2019/03/22(金) 19:55:26.77

161勝188敗　勝率 46.1%

悪くない。

**535** · 2019/03/22(金) 20:13:46.91

次のアイディアが欲しいところだ

**310** · 2019/03/23(土) 00:07:59.98

久々です。

新型版はテストのためにいちいち学習を止めるのが面倒で、放置しています。
一晩耐久テストやらないとわからないので。

で、未だずーっと棋譜作成＆学習を続けています。
もともと８００件強の記譜をベースに間違い訂正をしたり、確定しているところ以降
の全分岐を作成したりして学習データにしていたのですが、昔作った記譜なので
序盤で結構間違いが多く、効率よく学習できないのではないかと考えました。

で、最近は序盤の定石６～２０手からスタートして記譜を作成したりしていました。
そこそこ序盤の間違いが訂正されてきたのですが、まだところどころおかしい
ところがあって、Zebraで並べてみながら、多分間違えたであろう箇所を特定して
それ以後の記譜を作らせる事で、強制的に正しい手順に戻すなんていう、禁断の
ドーピング技を始めてしまいました。

現在は１２００記譜くらいまで増えていますが、まだまだ間違いも散見されますし、
パブリックドローの変化っぽいのに、記譜が無いものもあり、まだまだ記譜が足り
ていない感じです。

あと、ドーピング作業やりながらZebraの評価値見ていると、２０～３０手目あたりは
進行の種類によってはZebraの評価値もあまりあてにならないなぁと言う事に気付い
てしまいました。ここら辺の精度を上げると、もっと強くできるのではないかと思います。
自動対戦してくれる序盤DB付きのオセロプログラムがあると、ドーピング作業が更に
楽になるんだけど（汗

現在残り２０手目以後の学習に使う盤面は７０万件くらいになっています。それでも
残り２０手以後の初見の盤面の評価値では結構な誤差があります。本当にBuroさん
の線形評価関数で良いのかというのも相変わらず悩ましいところです。

**535** · 2019/03/23(土) 09:44:42.00

197勝 233敗勝率 45.8%

悪くない。

一旦対局中断します。

**535** · 2019/03/23(土) 17:57:32.40

やっぱ1手1秒くらいで打ちたいなぁ。
そうすれば対戦統計も棋譜も全然もっと取れるのに

**535** · 2019/03/23(土) 21:04:03.52

LV2と対戦してみました。
50局目　黒(airandom.dll)の勝利回数: 48　白(ai-lv2.dll)の勝利回数: 2
勝率 96%

**535** · 2019/03/24(日) 10:11:30.45

LV1ともやってみました。
50局目　黒(airandom.dll)の勝利回数: 45　白(ai-lv1.dll)の勝利回数: 5
勝率 90%

**535** · 2019/03/24(日) 21:21:09.27

ふーむ、損失が減らない地点まで学習が進んでしまったようです。
一回止めるか。

**535** · 2019/03/24(日) 21:27:42.78

うーん、やっぱ現状を打破する画期的なアイディアが必要かな。
ちなみにいまは強さよりも速度が欲しいかも。

**535** · 2019/03/25(月) 05:48:57.06

対戦してます。

黒番　対 LV3　107勝 102敗勝率 51.2%

200戦以上して勝率50%超えはすごい！
今日一日回してみます。

**535** · 2019/03/25(月) 21:18:02.28

結局負け越しでした

165勝 174敗勝率48.7%

でも決して悪い結果ではない！

**535** · 2019/03/26(火) 21:11:49.41

まだ回してました

239勝 237敗勝率 50.2%

キター！

まあ、今だと50%行くかどうかはホント運しだいなんだろな。

**535** · 2019/03/26(火) 21:12:45.47

そろそろ対局止めて次の学習のターンに入ります。

**535** · 2019/03/26(火) 21:59:22.07

うお、棋譜が多すぎてls */*.sgfがコアダンプするようになったｗ
分割しないと駄目か～

**535** · 2019/03/27(水) 21:35:10.22

そろそろ人間（俺）相手に勝利が欲しいところだがまだむずかしいかな。
素人相手なら勝てるんだろうか？

**535** · 2019/03/28(木) 19:32:56.94

165勝 176敗勝率 48.4%