Fala Galera, tudo bem?
Eu gostaria de criar um Crawler para fazer a varredura dia em alguns sites específicos e me trazer em uma planilha ou algo do tipo as matérias da home desses sites. No caso eu gostaria de fazer uma varredura em portais de noticias.
Sou leigo no assunto, então gostaria de saber oque eu preciso de recurso (Banco de dados, Servidor, algo do tipo) para criar e qual melhor linguagem para desenvolvimento desse tipo de demanda.
Muito obrigado.