いきなりUnityで問題ない
むしろUnityを使った方がC#を学びやすいと思う
「UnityではじめるC#」というそのものズバリの本があるからそれをオススメする