そもそもGUIにX窓が必要で無い、むしろ非効率。
なんでワザワザlocalhost相手にsocket接続してんの?
DirectXみたいに描画しろよ。それに加え、5.1ch 3D音響との連携も全く考慮されてない。