1

Gostaria de saber como eu posso executar um script Node.js em uma página HTML. O script é um crawler, ou seja, ele puxa dados de uma página e eu gostaria de exibir as informações que ele trouxer. Gostaria de saber também, se existe alguma função parecida para HTML. Obrigado!

4
  • Pergunta: por que tem que ser executado no servidor? Não pode executar no próprio HTML? Commented 24/05/2017 às 1:25
  • Olá Cigano. Então tem que ser executado no servidor por causa do node.js, eu estou tentando achar alternativas para executar direto no html, porém não encontro. Commented 24/05/2017 às 15:49
  • Na verdade você precisa combinar a resposta do @Sergio com alguma forma de o HTML chamar um método no servidor, como usar um endpoint do Express.js. Commented 24/05/2017 às 15:55
  • Obrigado @CiganoMorrisonMendez, vou tentar. Commented 1/06/2017 às 0:20

1 Resposta 1

2

Existem alguns crawlers na NPM/Github, um deles o simplecrawler que costumo usar.

Um script que eu uso é:

var domain = 'http://teu.dominio.com/';
var Crawler = require("simplecrawler");
var fs = require('node-fs');
var url = require('url');
var path = require("path");

new Crawler(domain).on("fetchcomplete", function(queueItem, responseBuffer, response) {

  var parsed = url.parse(queueItem.url);
  if (parsed.pathname === "/") {
    parsed.pathname = "/index.html";
  }

  // Diretoria de destino
  var outputDirectory = path.join(__dirname, 'tua_pasta');

  var dirname = outputDirectory + parsed.pathname.replace(/\/[^\/]+$/, "");
  var filepath = outputDirectory + parsed.pathname;
  fs.exists(dirname, function(exists) {
    if (exists) {
      fs.writeFile(filepath, responseBuffer, 'utf8', function() {});
    } else {
      fs.mkdir(dirname, 0755, true, function() {
        fs.writeFile(filepath, responseBuffer, function() {});
      });
    }

  });

}).start();

Precisas configurar o dominio, e a pasta de destino, de resto é só correr o ficheiro.

1
  • Olá Sergio. Obrigado pela resposta, tem como eu executar esse script direto no html? Obrigado! Commented 24/05/2017 às 15:49

Você deve fazer log-in para responder a esta pergunta.

Esta não é a resposta que você está procurando? Pesquise outras perguntas com a tag .