ちょっとデバッグかけてみてわかったんですが、Network Managerで接続した際に生成されるplayerにこのようなスクリプトをつけて
プレイしてみると、クライアント側ではAを押したとき1度しか呼ばれないのですが、ホスト側では生成されているプレイヤー数だけ呼ばれていたんですが、
これはホスト側がすべてのプレイヤーの入力をしてしまっているってことですよね？
これを回避するにはどうすればいいのでしょうか？

public class test : NetworkBehaviour
{
void Update () {
if (Input.GetKeyDown(KeyCode.A))
{
Cmddebug();
}
}

[Command]
public void Cmddebug()
{
Debug.Log(gameObject.name);
}
}