ツギハグスバルは残骸君でナツキスバル、つまり挑戦者本人じゃないから塔から出てもルール違反じゃ無い説
そもそもスバルは回答権こそあれど正式には挑戦者じゃ無い説
スバルがルール説

適当に考えてこんなかんじ