2

Estou usando a biblioteca Nightmare, para Web scrapping, a função funciona normalmente quando passo uma string como parâmetro '.seletor', o problema ocorre quando armazeno este valor em uma variável e passo como parâmetro, segue código abaixo (irei utilizar um produto da amazon como exemplo):

JS:

const nightmare = require('nightmare')()

async function checkPrice () {
      const url = 'https://www.amazon.com.br/250GB-SAMSUNG-970-EVO-PCIe/dp/B07CGGNX7S/'

      const priceNow = await nightmare.goto(url)
        .wait('#priceblock_ourprice')
        .evaluate(() => document.querySelector('#priceblock_ourprice').innerText)
        .end()

      console.log(priceNow) // R$664,90
    }

checkPrice()

Dessa maneira o preço do produto é retornado, sem nenhum tipo de erro...

Segue exemplo com o erro:

JS:

const nightmare = require('nightmare')()

async function checkPrice () {
      const url = 'https://www.amazon.com.br/250GB-SAMSUNG-970-EVO-PCIe/dp/B07CGGNX7S/'
      const priceSelector = '#priceblock_ourprice'

      const priceNow = await nightmare.goto(url)
        .wait(priceSelector)
        .evaluate(() => document.querySelector(priceSelector).innerText)
        .end()

      console.log(priceNow) // Mensagem de erro
    }

checkPrice() 

Mensagem de erro:

inserir a descrição da imagem aqui

1
  • Em qual chamada o erro (priceSelector aparentemente não está definido) está ocorrendo? Na linha da chamada do método wait ou no querySelector, que está no evaluate? Suponho que seja no evaluate, que provavelmente faz um pouco de black magic por baixo dos panos... Commented 11/01/2020 às 15:28

1 Resposta 1

1

Após uma pequena pesquisa, encontrei este documento. Conforme ponderei nos comentários, o método evaluate realmente faz uma certa magia por baixo dos panos, o que causa toda essa confusão.

O que ocorre é que como essa biblioteca utiliza Electron por baixo dos panos (de alguma forma que não procurei entender). Por isso, ele transforma a função de callback que você passa para como argumento para o método em questão para que possa ser executada no contexto do Electron. Por isso que mesmo parecendo estar no escopo, variávies como o priceSelector não estão, já que a função estará sendo executada somente no contexto Electron. Também é por isso que passando valores literais não causa nenhum tipo de erro: eles também são colocados na função "stringificada".

Veja no GitHub o momento em que a função de callback é convertida em string.

Desse modo, você tem duas alternativas para resolver o problema:

Utilizando os últimos argumentos de evaluate para fornecer parâmetros para o callback que será avaliado

Conforme consta na documentação do evaluate e no documento que mencionei anteriormente, você pode passar outros argumentos para o evaluate, que serão passados para o seu callback. Mais ou menos assim:

// ...
.evaluate(
  (selector) => document.querySelector(selector).innerText,
  priceSelector
)
// ...

Note que agora a função de callback está recebendo selector como parâmetro. Parâmetro esse que passamos como argumento para evaluate após o callback. [4]

Passar valores literais

Se você achar mais simples, também pode passar os valores de forma literal. Basicamente, se você preferir essa opção, ficará restrito somente a usar qualquer tipo de referência externa ao escopo do callback.


Enfim, cabe a você escolher qual opção prefere. :-)

Você deve fazer log-in para responder a esta pergunta.

Esta não é a resposta que você está procurando? Pesquise outras perguntas com a tag .