「Remote Development」拡張機能をインストールしてもOKです。(コンテナ接続とWSL接続のパッケージが含まれているものです。)
参考記事:【設定爆速】VS CodeのRemote Developmentを使ってSSH接続したEC2上のファイルを編集する
Windowsの方はこちらの記事を参考にしてみてください。
VSCodeのRemote Developmentを使ってみる
*コピー用のテキストを上記「素材」に配置しています。そちらからコピーしてください。
■.ssh/configの記載例。IPアドレスとキーペアのパスはご自身の環境に合わせてください。
Host WebServer1
HostName 52.192.16.252
IdentityFile /Users/blackriver/AWS/keypair01.pem
User ec2-user