O ideal é você não usar a Fluent API, e sim uma entidade associativa:
public class Cliente
{
/* Propriedades do Cliente */
public virtual EnderecoCliente EnderecoCliente { get; set; }
}
public class Endereco
{
/* Propriedades do Endereco */
public virtual EnderecoCliente EnderecoCliente { get; set; }
}
E então:
public class EnderecoCliente
{
[Key]
public int EnderecoClienteId { get; set; }
[Index("IUQ_EnderecoCliente_ClienteId_EnderecoId", IsUnique = true, Order = 1)]
public int ClienteId { get; set; }
[Index("IUQ_EnderecoCliente_ClienteId_EnderecoId", IsUnique = true, Order = 2)]
public int EnderecoId { get; set; }
public virtual Endereco Endereco { get; set; }
public virtual Cliente Cliente { get; set; }
}
Definindo:
var endereco = new Endereco
{
/* Defina aqui outras propriedades */
EnderecoCliente = new EnderecoCliente {
Cliente = contexto.Clientes.FirstOrDefault(c => c.ClienteId == 5)
}
};
[Index]
, introduzido nesta forma a partir do Entity Framework 6.1.0, garante a unicidade do registro associativo. Validações adicionais podem ser necessárias na aplicação para evitar erros estranhos de duplicidade de chave para o usuário.