光太郎が住んでるバスみんな知ってるのに襲撃しないんだから、ゴルゴム側には追跡とかそういう概念なさそうだし、
「海ルートの方がちょっと近い」とかその程度の理由なんじゃね?