「Remote Development」拡張機能をインストールしてもOKです。(コンテナ接続とWSL接続のパッケージが含まれているものです。)
参考記事:【設定爆速】VS CodeのRemote Developmentを使ってSSH接続したEC2上のファイルを編集する
Windowsの方はこちらの記事を参考にしてみてください。
VSCodeのRemote Developmentを使ってみる
コマンド等はこちらにまとめています。(GitHubへのリンク)
該当のスプリント番号を選択し、参照してください。
https://github.com/CloudTechOrg/course-info/blob/main/README.md