Se eu fosse você, abriria mão do @OrderBy e usaria JPQL para fazer esta consulta:

    public Cliente clientePorEmail(String email) {
        Query query = manager.createQuery("SELECT cliente FROM Cliente cliente
            JOIN cliente.pedidos pedido 
            WHERE cliente.email = :email ORDER BY pedido.id");
        query.setParameter("email", email);
        return (Cliente) query.getSingleResult();
    }