pythonのGUIライブラリを使っている既存スクリプトの開発環境をvscode remote containerに移したいんだけど、これって茨の道？

ググるとDocker内でlinux desktop起動して、その中でx11(?)というguiの設定をして、ホスト（win/mac）側にもx11を入れて…
という設定が必要で、それでも安定して動かすのは至難の業と感じた