Só um complemento a tudo que ja foi falado, existem 2 tipos de tag:
Light-weight tags
Que como já foi dito são como links simbólicos, apenas apontam para um commit.
Quanto a espaço no repositório, o git cria somente um arquivo com o nome da tag dentro, portanto é mínimo.
Annotated tags
Resumindo são tags com um pouco mais de informação, além de apontarem para o commit, também armazena o nome e email do criador da tag, data, e mensagem da tag, tipo a mensagem do commit.
Já que contem muito mais informação do que uma light-weight ela acaba sendo armazenada como um objeto completo do git, logo ocupa mais espaço do que a light-weight