A primeira coisa que precisa entender é que o Razor Pages é como o MVC, não é uma tecnologia nova, ele depende totalmente da tecnologia chamada ASP.NET MVC, sem usar o padrão MVC. É uma forma mais simples de usar o MVC juntando o VC em uma única unidade, porque na maioria das vezes é suficiente.
Pra falar a verdade eu vejo pouco sentido no uso do MVC na forma como usam.
Você pode usar o MVC full onde precisa e Razor Pages onde dá. Não é uma escolha binária. Misture se for preciso.
O que muda mesmo é a organização do código. Pode continuar existindo um arquivo com o código e um arquivo com o HTML, mas tudo faz parte da visão, é como um code behind que tem no ASP.NET WebForms, você decide como organizar. Existem métodos para lidar com todas as requisições de forma padrão, não precisa ficar criando um método para cada requisição.
No geral acho que é isso.
Por que existe o MVC?
Para modularizar, dar independência para cada parte da aplicação, lidar com rotas complexas. Então você pode ter várias visões diferentes, vários modelos diferentes e vários controladores diferentes interagindo de várias maneiras.
A maneira como costumam fazer a aplicação o modelo nunca muda, e a visão menos ainda, nem tem muito o que mudar, a não ser no caso do WebAPI que a visão deixa de existir. Pra que complicar algo quando é sempre igual?
De que adianta criar 3 camadas se cada mudança que você faz tem que mexer nas 3? Pra que serve esse padrão de projeto se ele cria complicação? Serve justamente para tornar intercambiável para responsabilidade. Se a aplicação não precisa disto, boa parte do argumento de venda se perde.
Mas hoje ficou fácil vender algo, basta falar bastante sobre ele e as pessoas passam achar que ele soluciona tudo.
Vantagem
Sempre que você deixa de usar algo que não precisa está em vantagem. As pessoas usam muito sem pensar o porquê de estarem usando aquilo, estão apenas seguindo a receita que aprenderam.
Sabe por que sua mãe vai fazer a receita que aprendeu na televisão e não fica bom? Por que ela seguiu a receita. Mas não sabe como faz aquilo. Tem sempre fatores que não são iguais em todas as vezes que vai fazer aquilo. O ambiente é outro, a marca do produto é outra, a força do fogo é diferente, o tempo que demorou para atingir um ponto muda. Tem que saber o que fazer, não pode seguir a receita pura e simplesmente.
Claro que a ferramenta tem que ajudar, e agora temos algo que vai pelo caminho mais simples.
Há pessoas que dizem ter outras vantagens, mas de forma geral é óleo de cobra para a maioria dos casos, ou seja, só cura uma doença inexistente, é placebo.
Adoção
Adoção é algo difícil de prever, eu diria que sim porque é melhor para a imensa maioria dos casos e porque há incentivo para o seu uso (é a aplicação padrão no Visual Studio para ASP.NET Core). Acho até que consertaram alguns erros.
Pena que não achei o artigo do Scott Hanselman dizendo que deveria ser a escolha padrão e só adotar o MVC quando Razor Pages não atende. Mas cada vez a Microsoft publica material dizendo que deveria ser o padrão.
Já que estamos no campo da opinião, eu sempre achei o controller um pouco exagerado pra maioria dos casos. Se o modelo for bem feito, for inteligente, e a apresentação souber o que fazer com o dado um pouco mais bruto, é só o que precisa. Claro perde a capacidade de intercambiar as partes, em alguns casos.
De forma análoga o .NET 6 passou ter uma forma de API mais simples que a WebAPI que tinha controllers. Boa parte dois casos ela resolve melhor.
Conclusão
Ele é como o PHP era no passado (que dá para usar ainda), uma forma simples de gerar uma página no backend. É uma pena que isso se perdeu, porque para a maioria dos casos é suficiente. MVC só é necessário quando se tem algo complexo, rotas muito flexíveis.
Veja mais
Coloquei no GitHub para referência futura.