O marcador BOM é um indicar de ordem dos bytes em um arquivo de texto, para cada par de 2 bytes, no caso de unicode-16 e para o grupo de 4 bytes no unicode-32.
Esse marcador vem exclusivamente no início do arquivo.
BOM significa Binary Order Mark"Byte Order Mark", que em português seria algo como Marca"Marca de ordenação bináriade bytes".
EDIT
Também existe BOM para unicode-8, mas o seu uso não é recomendado, uma vez, que só existe uma ordenação possível para caracteres compostos por um único byte.
EDIT Print da wikipedia, mostrando os marcadores (já que não é possível montar tabelas aqui no SO)