CNNしようとすると、フィルタの可視化とかしたいので、やはりRGB(BGR)ですよね。
それだと3バイト。
しかしながら、画像に4方向(上下左右)を持たせたいのですが、どうするのでしょうか。