Sim, é possível já que existe o Node.js (Deno também) para rodar no backend. Claro que há algumas diferenças na API do browser e do servidor, e isso é mais importante que a linguagem em si.
Se você gostar e se dá muito bem com JS pode ser uma boa, tem facilidades em usar uma linguagem só. Mas muitas vezes a solução pode não ser a mais adequada.
Particularmente eu estou indo em direção contrária, já que há fortes críticas ao JavaScript. Uma delas é a proliferação de framewoks e ferramentas.
Eu prefiro usar C# em backend e agora vou usá-lo também no frontend através do Blazor.
Diversas linguagens estão fazendo o mesmo através do WebAssembly. Por mim o JS não tem futuro, mas pra muita gente tem.
Minha visão foge um pouco da maré corrente. E muitas pessoas bastante fortes na área pensam o mesmo. O que importa é saber o fundamento. Essa coisa de escolher uma linguagem e aprender programar assim, resolve em parte o problema, tem muita gente que se dá bem dessa forma, mas é difícil se tornar um excelente profissional assim. Conheço muita gente que até se torna conhecido, tem bons empregos, até porque são capazes de se comunicar bem e conseguem se vender bem só com isso. Mas é diferente de dominar a programação, de ser capaz de resolver qualquer problema, de ser criativo.
It is practically impossible to teach good programming to students that have had a prior exposure to BASIC: as potential programmers they are mentally mutilated beyond hope of regeneration
-- Edsger W. Dijkstra
Eu diria que isto vale hoje para JS (não só, mas a lista é grande). Embora quase todo mundo que eu conheço que se tornou profissional da área e começou com BASIC alcançou algum grau de excelência. De fato JS cria vícios e falta de entendimento bem piores que o BASIC fazia nas pobres mentes.
Note que entende estar entrando na área e já ter um portfólio, antes de saber o que fazer. É, parece que é assim agora, depois o pessoa vai reclamar que a área paga mal. Por isso que no passado ninguém contratava gente mais velha, hoje preferem essas, são as pessoas que aprenderam.
Espero ter podido dar um bom direcionamento, foi minha intenção, apesar da criticidade da mensagem, até porque hoje em dia falta isso também para as pessoas tomarem decisões mais equilibradas e fundamentadas.
Coloquei no GitHub para referência futura.