Apesar de que cada GUID gerado não possui nenhuma garantia de ser único, o número total de chaves únicas (2128 ou ~3.4×1038) é tão grande que a probabilidade do mesmo número ser gerado duas vezes é muito pequena. Por exemplo, considerando que o Universo Observável contém 5x1022 estrelas, cada estrela poderia ter ~6.8×1015 dos seus próprios GUIDs.
Fonte: Wikipedia
Segundo essa resposta no SO há 1% de chance de colisão se gerar 2,600,000,000,000,000,000 GUIDs.
E nessa outra parece mostrar como criar uma colisão. É bem difícil. Demora absurdamente.