Fiz da seguinte maneira, pego o dia atual, volto a data para o primeiro dia da semana e faço o loop até o domingo.
Ficou o seguinte código:
<?php
$translate = array(
0 => "Dom",
1 => "Seg",
2 => "Ter",
3 => "Qua",
4 => "Qui",
5 => "Sex",
6 => "Sab",
);
$data = new DateTime(); // Pega a data de hoje
$diaN = date( "w", time()); // Dia da semana, começa em 0 com domingo, 1 para segunda...
$primeiroDiaDestaSemana = $data->modify('-' . $diaN . ' day');
for($i=0;$i<=6;$i++) {
echo $data->format('d/m/Y') . ' - ' . $translate[$data->format('w')] . "<br>";
$data->modify('+1 day');
}
Imagem do resultado do código acima: