過学習解消するには、全局面の教師データをもって学習させるしかない。
その時点で、十分な自由度を持ったモデルを使用していたら、完全に学習できる。
足りなかったら、自由度を上げれば良い。理論上はDCNNは万能近似関数たりうるから。

が、そこまでの教師データがあるのであれば、いちいち評価関数にしなくても、
たんなるBook参照で十分である。

というヨタ話はおいといて、不十分な教師データ、不十分な自由度の評価関数で、
できるだけ正しい予想をするためには、探索部で苦手局面についての手当をするか、
評価関数モデルに、ある程度人間の手を入れるしかないと思うの。