速度を気にするんだったら
生のpythonはお勧めできないな
そういう言語ではないし
ライブラリを呼ぶか
高速化したい部分を c か c++で
書くのが現実的