Afinal, o que seria exatamente o Target framework?
É a versão do framework .NET para o projeto inteiro. Versões mais recentes possuem mais recursos, mais funcionalidades, e a especificação das linguagens, como C#, se torna mais avançada.
Qual sua função?
O framework é o conjunto de ferramentas implementado pela Microsoft. Basicamente, todas as classes não-primitivas fazem parte dele.
Altera-lo pode causar problemas na aplicação ou no servidor?
Depende. Alterar para uma versão antiga pode sim causar problemas. Alterar para uma versão nova, dificilmente, salvo raras exceções, mas cujas exceções são devidamente documentadas na Internet.
Quais as desvantagens de estar desatualizado?
Várias, eu diria. Recursos novos saem com alguma constância. A programação assíncrona, por exemplo, não existe nativamente na versão 4 do .NET. Precisa ser adicionada como um pacote extra. Versões mais novas tendem a ser melhores em desempenho e segurança de dados.
Qual a relação entre o Entity Framework e o Target framework? Qual a dependência entre eles?
O Entity Framework é dependente da versão do .NET que você está usando. A versão 6, por exemplo, depende do framework 4.5 para funcionar.
Atualizar um pode afetar o outro?
Pode.
Atualizar o .NET para uma versão mais recente não afeta o Entity Framework. Para uma versão mais antiga, pode sim afetar.
Atualizar o Entity Framework pode, em alguns casos, criar uma incompatibilidade com o .NET, mas isso só acontece se a versão do .NET for muito antiga.
Posso usar uma versão mais recente do EF em uma aplicação com o Framework antigo?
Também depende. A versão 6 ainda suporta o .NET 4.0. Veja este link para mais informações.