Breve resposta: Não
O alert do navegador é um simples alerta DOM, como descrito na W3C "mostrar um alerta ao usuário e esperar para que ele o feche"; via de regra: não há especificação, embora navegadores até possam deixar você personalizar como fazem com a scrool bar: https://developer.mozilla.org/en-US/docs/Web/CSS/::-webkit-scrollbar mas isto estaria fora da especificação
Como personalizar (Alternativa simples)
Você precisa fazer seu próprio alert e imitar o comportamento do navegador por javascript.
exemplo:
JavaScript:
<script>
function customAlert(message) {
var div = document.createElement("div");
div.classList.add("custom-alert");
var close = document.createElement("a");
close.textContent = "[x]";
close.classList.add("close"); // para o seu css
close.addEventListener("click", () => {
document.body.removeChild(div);
}, true);
div.appendChild(close);
div.appendChild(document.createTextNode(message));
document.body.appendChild(div);
}
customAlert("ola");
</script>
CSS
.custom-alert {
/* o css do seu alerta */
}
W3C dom alert: https://html.spec.whatwg.org/multipage/timers-and-user-prompts.html#dom-alert
alerts
.