Não é contra-indicado carregar jars em tempo de execução, pelo contrário.
Desenvolver aplicações que funcionem dessa forma é o desejável. Porque assim podemos alterar uma parte do software sem precisar recompilá-lo por completo e sem sequer parar a execução do mesmo.

Seu pensamento está correto.

O uso deste tipo de abordagem pode ser observado nos plugins. Os plugins adicionam features a um software em tempo de execução. As vezes é preciso reiniciar o software para que ele possa carregar o plugin, mas nem por isso a beleza da solução é perdida.