たいていのアプリ・サービスは、サーバー/クライアント方式

Linux のシステム内で動いているものは、サーバーで、
それに、Windows などのパソコンからアクセスするものは、クライアント

例えば、AWS なら、AWS Command Line Interface(AWS CLI)みたいなものを、
Windows パソコンに入れて、それでサーバーにアクセスする

MySQL 用のクライアントも探してみれば？