O Excel não trabalha (faz operações) com horas negativas, provavelmente você está tratando a hora como uma "string" (formato texto, p.ex.: ="00:05").
Neste caso, mesmo para uma "string", o Excel entende que é horas se estivar positivo, seja no formato padrão "00:00:00" ou em outro, caso sua lista de formatos para hora contemple "00:00".
Então, como entre "00:10" minutos e "-00:10" minutos, os valores estão entre 0 e 10 em "valores absolutos", faça o seguinte:
Retire o sinal negativo da hora para fazer a comparação
Em outra célula, pegue o "Valor" desta hora, assim:
=Valor(A1)
O resultado será um número que representa esta hora para o Excel. Como "00:10" minutos é igual a 0,000115740740740741, se a célula estiver entre este valor e 0, a hora está no intervalo que deseja.
Fiz o teste usando a hora assim:
="00:00:09"
="00:00:10"
="00:00:11"
E a fórmula:
=Se(Valor(C15)<0,000115740740740741;"00:00:00";C15)
ou melhor...
=Se(Valor(C15)<Valor("00:00:10");"00:00:00";C15)
É só adaptar para o teu caso e aplicar!