Fala galera, me surgiu a necessidade de consumir uma API com um volume de dados muito grande, e preciso fazer isso a partir de uma linguagem pois a API possui limitações, e vou de PHP.
O problema é que eu preciso fazer diversas requisições e algumas delas acabam dando erro 429. Quando esse erro acontece, eu queria ver ele de alguma forma sem ter que esperar o script parar de rodar, pq as vezes fica mais de 10 minutos rodando e seria interessante saber oq ta acontecendo.
Para saber qual foi o dado perdido eu cheguei a solução de tentar debuggar de forma meio porca:
$i = 0;
$log_file = fopen('arquivo-log', 'w');
while($i < 5) {
$req = curl_get('url-qualquer'); // função que eu utilizo, mas nao vem ao caso
$body = "HTTP Status: {$req['http_code']}, Request Time: $i \n-------------------\n";
fwrite($log_file, $body);
sleep(2); // para o script nao rodar muito rapido e eu poder visualizar a interação
$i++;
}
fclose($log_file);
Porém o arquivo é escrito de forma completa quando o script termina de ser executado. O que eu queria é ver ele sendo escrito a cada vez que entrasse no laço. Consegui isso fazendo um insert num banco de dados, daí eu vejo os dados sendo inseridos ao longo da execução, mas não acredito que seja a melhor solução.
Alguém pode me ajudar? Estou fazendo algo errado ou é impossível fazer isso visto q o php é interpretado e daí compilado por completo antes de algum output?
Ou existe alguma outra forma de fazer isso, talvez com um Xdebug e tals?