Não é possível em Java.
É possível inicializar o array com um tamanho específicoinicializar o array com um tamanho específico para evitar que precise realocações quando a lista fica maior que o array disponível.
As opções citadas em resposta linkada em comentário acima e outras respostas aqui não geram uma lista real, gera algo que se parece uma lista, mas ela fica imutável e não pode fazer tudo o que se espera de uma lista. E não é algo eficiente, é só um facilitador.
Se isto serve, então um array resolve seu problema e ele pode ser inicializado como deseja. Portando as outras soluções ou não resolvem o problema citado ou o problema pode ser resolvido de forma muito mais elegante e performática.
É possível criar um método que crie uma lista real a partir de uma sequência de argumentos, mas também não é eficiente. Na verdade é muito ineficiente porque haverá duas cópias, uma para inicializar o array que será passado para o método e outra para copiar para a lista.
Em C# tem como fazer isso, mas é só açúcar sintático. Em C++ tem como fazer, em certas circunstâncias de forma eficiente.