結婚してからずっと嵌めている物なので、今更外すわけにもいかないというのが一番です。
外すにはそれ相応の理由が要ります
妻との仲は冷めているので、そういう既婚者もいるってことです。