Já tens umas respostas muito boas, vou só sugerir uma força de criares uma coleção de objectos com base na verificação pretendida, para dinamizar o teu cenário prático:
Exemplo no JSFiddle
// recolhe elementos que só contém números
var soNumeros = $('a').filter(function() {
return /^[0-9]*$/.test( $(this).text() );
});
// realiza algo com a colecção de objectos gerada
soNumeros.addClass('bubu');
Resultado da adição da classe de CSS bubu
que altera a formatação do link:

Evoluindo a utilização prática deste código, podemos envolver o mesmo numa função que nos permita fazer uso deste método para outros cenários:
Exemplo no JSFiddle
/* Procura elementos que contenham X
*/
function procura (ele, pattern) {
return ele.filter(function() {
return pattern.test( $(this).text() );
});
}
// realiza algo com a colecção de objectos gerada
soNumeros = procura($('a'), /^[0-9]*$/);
soNumeros.addClass('bubu');
Desta forma podes passar o selector pretendido e a RegExp a ser utilizada.
<a href="#">a1</a>
?