GCされてないだけじゃね
適当なところでGC.Collect() してみなよ