わかったBに衝突時イベント出してAのvelocityにマイナスかけて反対方向に跳ね返すとして
BはAに対してだけ質量無限大みたいな挙動をさせられればいいってことか

RigidbodyのAPIにVelocityのアップデートに割り込める機能があればAの名前なりでアップデートさせないようにできそうだけど
そんな都合のいいものあるのかな