Essa presunção que o SQLite está no servidor ou que outro não está e que isto é mais rápido é algo incorreto. O fato do banco de dados estar no servidor ou não, depende. Nem é certo que o SQLite esteja, mas geralmente está. Os demais tem mais chance de não estar, mas quase sempre está e se você quer que esteja então estará, porque acha que não?
Nem vou entrar na questão que esse ganho todo que acha que terá nem sempre é verdade.
Talvez esteja usando termos errados, ou até não entenda o funcionamento das coisas, mas para tomar decisões certas precisa entender tudo isso, caso contrário terá que contar com uma pessoa aleatória na internet dizendo o que é bom para você.
O normal é SQLite estar no mesmo processo, mas ele é um banco de dados e se tiver que fazer esse esqueminha que fez o SQLite também é usuario -> servidor -> banco de dados
, ainda que isso nem faça sentido.
Não sei se o SQLite já está no Laravel, mas vou confiar em você. E daí? O que isso muda a não ser o fato de não precisar pegar em outro lugar para por ali? Não, isso não faz ser mais rápido, isso muda nada, sua presunção está bem equivocada.
E o que isto importa se tem inúmeros outros fatores que vão influenciar a performance muito mais que isso, inclusive boa parte deles tem a ver com sua capacidade de usar o banco de dados direito e fazer códigos adequados.
O fato de já ter um servidor fica bem mais fácil usar o SQLite.
Já respondi sobre o uso do SQLite. O SQLite não pode ser usado em todos cenários, mas pode ser usado em bem mais do que as pessoas acham, se elas souberem o que estão fazendo e estiverem dispostas resolver algumas questões que tem nele conforme citado no link.