インサイダー取引って、何でバレるの？

だって未公開情報を基にある会社の株式を取引したとしても、
投資家の人数、株取引の件数なんて星の数ほどにあるわけで。
インサイダー取引だとか会計士の株所有のひとつやふたつ、
「森の中の木の葉一枚」程度のもので、確率的に見つかる方が不自然だと思うが。