O marcador BOM é um indicar de ordem dos bytes em um arquivo de texto, para cada par de 2 bytes, no caso de unicode-16 e para o grupo de 4 bytes no unicode-32.
Esse marcador vem exclusivamente no início do arquivo.
BOM significa "Byte Order Mark", que em português seria algo como "Marca de ordenação de bytes".
EDIT
Também existe BOM para unicode-8, mas o seu uso não é recomendado, uma vez, que só existe uma ordenação possível para caracteres compostos por um único byte.
EDIT Print da wikipedia, mostrando os marcadores (já que não é possível montar tabelas aqui no SO)