Para adicionar um projeto ASP.Net Core vazio, você deve abrir um prompt de comando, navegar até o diretório onde deseja criá-la e executar o seguinte comando:
dotnet new web
O template do MVC já inclui a estrutura inicial desse tipo de projeto, você consultar todos os templates disponíveis através do comando (referência):
dotnet new -l
Os passos seguintes são para outras versões do Visual Studio, uma vez que o Visual Code não trabalha com padrão de solutions, apenas diretórios.
Para criar uma Solution vazia via Dotnet CLI, você deve abrir um prompt de comando, navegar até o diretório onde deseja criá-la e executar o seguinte comando:
dotnet new sln
Esse comando não possui nenhum argumento e irá criar um arquivo .sln com o mesmo nome do diretório onde o foi executado.
Agora para adicionar projetos à sua solution você pode utilizar os comandos sln (referência) ou seguir pelo caminho mais prático que criá-los pelo visual studio.
O mesmo pode ser feito dentro do próprio visual studio acessando o menu:
File -> New Project -> Other Project Types
E para adicionar um projeto web vazio: