そりゃ、ファイルの読み込みも、少しは関係あるけど、
たいていの本には「CPU コア数 + 1」を指定しろって書いてあるだろ

つまり、コンパイルが並列処理できるかどうかが重要!