No exemplo acima o literal é o 2.
O termo literal não é algo do .NET ou mesmo da computação, é um termo matemático básico.
Literal pode ser dito, grosso modo, já que está difícil entender, como um valor fixo.
Ele existe para determinar valores. O mais comum é que estes valores sejam números. Muitos desses números podem ter um sufixo indicado o seu tipo, ou podem ter prefixos indicando se a notação é diferente do decimal (hexadecimal, binário e octal são comuns). Outro literal bem comum é o que representa um texto, uma string ou mesmo apenas um caractere. true
e false
costumam ser literais do tipo booleano.
Algumas linguagens possuem outros literais. Algumas permitem até que se crie um literal, ainda que raro porque dá confusão.
O literal é sempre constante, mas uma constante não precisa ser representada por um literal. Muitas pessoas usam o termo constante inadequadamente para o literal. Apesar do literal ser constante ele pode ser atribuído para variáveis, o literal nunca mudará, mas o valor da variável poderá mudar.
Literal é exatamente como está colocado ali, não será manipulado, não cabe interpretação, não é algo representativo, é aquilo e só.
Coloquei no GitHub para referência futura.