Skip to main content
replaced http://stackoverflow.com/ with https://stackoverflow.com/
Fonte Link

Acabei abandonando o Jsoup e utilizei um webdriver. Escolhi o HtmlUnit para isto e o código que resolve o problema que eu estava encontrando é este:

import java.io.IOException;
import com.gargoylesoftware.htmlunit.*;

public class Main {
    public static void main(String...args) throws IOException {
        
        final String URL = "http://site.com/o/clouflare/bloqueando";
        
        Page page = new WebClient(BrowserVersion.BEST_SUPPORTED).getPage(URL);
        System.out.println(page.getWebResponse().getContentAsString()); // Feito!
    }
}

Uma observação sobre o HtmlUnit: ele printa todos os erros de validação em propriedades encontrados no documento (HTML, CSS e Javascript) por meio de um Logger. Para desabilitar isso, segui essa respostaessa resposta e inclui uma linha no meu código:

Logger.getLogger("com.gargoylesoftware.htmlunit").setLevel(Level.OFF);

Acabei abandonando o Jsoup e utilizei um webdriver. Escolhi o HtmlUnit para isto e o código que resolve o problema que eu estava encontrando é este:

import java.io.IOException;
import com.gargoylesoftware.htmlunit.*;

public class Main {
    public static void main(String...args) throws IOException {
        
        final String URL = "http://site.com/o/clouflare/bloqueando";
        
        Page page = new WebClient(BrowserVersion.BEST_SUPPORTED).getPage(URL);
        System.out.println(page.getWebResponse().getContentAsString()); // Feito!
    }
}

Uma observação sobre o HtmlUnit: ele printa todos os erros de validação em propriedades encontrados no documento (HTML, CSS e Javascript) por meio de um Logger. Para desabilitar isso, segui essa resposta e inclui uma linha no meu código:

Logger.getLogger("com.gargoylesoftware.htmlunit").setLevel(Level.OFF);

Acabei abandonando o Jsoup e utilizei um webdriver. Escolhi o HtmlUnit para isto e o código que resolve o problema que eu estava encontrando é este:

import java.io.IOException;
import com.gargoylesoftware.htmlunit.*;

public class Main {
    public static void main(String...args) throws IOException {
        
        final String URL = "http://site.com/o/clouflare/bloqueando";
        
        Page page = new WebClient(BrowserVersion.BEST_SUPPORTED).getPage(URL);
        System.out.println(page.getWebResponse().getContentAsString()); // Feito!
    }
}

Uma observação sobre o HtmlUnit: ele printa todos os erros de validação em propriedades encontrados no documento (HTML, CSS e Javascript) por meio de um Logger. Para desabilitar isso, segui essa resposta e inclui uma linha no meu código:

Logger.getLogger("com.gargoylesoftware.htmlunit").setLevel(Level.OFF);
Fonte Link
Renan Gomes
  • 19,3mil
  • 8
  • 54
  • 114

Acabei abandonando o Jsoup e utilizei um webdriver. Escolhi o HtmlUnit para isto e o código que resolve o problema que eu estava encontrando é este:

import java.io.IOException;
import com.gargoylesoftware.htmlunit.*;

public class Main {
    public static void main(String...args) throws IOException {
        
        final String URL = "http://site.com/o/clouflare/bloqueando";
        
        Page page = new WebClient(BrowserVersion.BEST_SUPPORTED).getPage(URL);
        System.out.println(page.getWebResponse().getContentAsString()); // Feito!
    }
}

Uma observação sobre o HtmlUnit: ele printa todos os erros de validação em propriedades encontrados no documento (HTML, CSS e Javascript) por meio de um Logger. Para desabilitar isso, segui essa resposta e inclui uma linha no meu código:

Logger.getLogger("com.gargoylesoftware.htmlunit").setLevel(Level.OFF);