>>179
性能の低いCPUを大量に用意したのがGPU
それに対してベクトル演算は、CPUでいうところのSIMD命令

インテルのSIMDは、SSE-2の１クロックに倍精度浮動小数点演算2個同時に行う
AVXでは4個、AVX2では8個
これらは各コアで行われるので
例えば4コアでAVX2だと、1クロックに32個の倍精度浮動小数点演算が行われる

このSIMDを128個とかやるのがベクトルプロセッサ
例えば16x16の行列演算が１クロックで終わる