Você pode usar o replace
pra substituir os caracteres indesejados na sua string por uma string vazia:
'#[Header]'.replace('#', '') # '[Header]'
Pra fazer isso em todas as strings da lista, basta usar uma compreensão de lista pra aplicar o replace
em todos os elementos:
minha_lista = ['#[Header]', '#Application Name\tLCsolution', '#Version\t1.24']
minha_lista = [s.replace('#', '') for s in minha_lista]
Ou fazer o mesmo pra só um slice:
minha_lista = ['#[Header]', '#Application Name\tLCsolution', '#Version\t1.24']
minha_lista[:2] = [s.replace('#', '') for s in minha_lista[:2]]