Você está a usar IDs duplicadas. O problema é provavelmente com a ID `linkRemover`.  
IDs têm de ser únicas, então deve usar classes em vez de IDs.

Sugestão:

Mudar no html a ser inserido de :

    <a href="#" id="linkRemover">

para

    <a href="#" class="linkRemover">

E no jQuery/JavaScript de:

        $('#linkRemover').live('click', function() { 

para

        $('.linkRemover').live('click', function() {