Skip to main content
2 de 6
Adicionado tag web-crawler, que é o tema principal da pergunta

Consulta Simples Nacional CNPJ

Estou tentando implementar uma consulta do Simples Nacional, o funcionamento é parecido com o "oficial" da receita.

Detalhes que percebi até o momento:

  1. Após carregar a página, executa um ajax (arquivo captcha2.js) que retorna 3 itens em formato JSON {Token, Dados, ContentType}. O Token é armazenado em um cookie que provavelmente serviria para validar a imagem após submit. Dados é o base64 da imagem. ContentType o tipo da imagem.
  2. Ele gera o input do cnpj concatenando um número que também é armazenado em outro input hidden (id: ctl00_ContentPlaceHolderConteudo_HiddenField1).
  3. Existem outros inputs (__VIEWSTATE, __EVENTVALIDATION, __EVENTARGUMENT, __EVENTTARGET) que armazenam valores, os últimos dois, geralmente vazios...

Estou capturando os dados iniciais e setando os headers na segunda requisição para recuperar os dados, porém, o problema é que sempre dá erro (Caracteres anti-robô inválidos. Tente novamente.).

Seguem os códigos que tenho até agora (podem estar bagunçados ou com linhas desnecessárias, são apenas testes ainda, falta limpar o código posteriormente):

ConsultaCnpjSimplesNacional.php:

class ConsultaCnpjSimplesNacional {

    /**
     * Devolve um array de parâmetros para consulta de CNPJ Simples Nacional
     * @return array
     */
    public static function getParams()
    {
        $urlRoot = 'http://www8.receita.fazenda.gov.br';
        $urlAplicacao = 'SimplesNacional/Aplicacoes/ATBHE/ConsultaOptantes.app/ConsultarOpcao.aspx';

        $chInicial = curl_init("$urlRoot/$urlAplicacao");
        curl_setopt($chInicial, CURLOPT_RETURNTRANSFER, 1);
        curl_setopt($chInicial, CURLOPT_HEADER, 1);
        curl_setopt($chInicial, CURLOPT_TIMEOUT, 20000);
        curl_setopt($chInicial, CURLOPT_CONNECTTIMEOUT, 20000);
        $response = curl_exec($chInicial);
        curl_close($chInicial);

        require_once __DIR__ . DIRECTORY_SEPARATOR . 'simple_html_dom.php';

        $html = str_get_html($response);
        $inputViewStateValue = $html->getElementById('__VIEWSTATE')->value;
        $inputEventValidationValue = $html->getElementById('__EVENTVALIDATION')->value;
        $inputHiddenField1Value = $html->getElementById('ctl00_ContentPlaceHolderConteudo_HiddenField1')->value;
        $inputHddServidorCaptchaValue = $html->getElementById('hddServidorCaptcha')->value;
        $urlCaptchaContainer = $html->getElementById('captcha-container')->{'data-url'};
        //Essa informação é definida no javascript da página
        $urlPathImg = '/Captcha/Inicializa.ashx';
        $html->clear();
        unset($html);
        
        //Vamos requisitar a imagem (normalmente executado por ajax no cliente)
        $urlCaptchaContainer .= $urlPathImg;

        $chImagem = curl_init($urlCaptchaContainer);
        $options = [
            CURLOPT_HTTPHEADER => [
                'Content-type' => 'application/x-www-form-urlencoded'
            ],
            CURLOPT_RETURNTRANSFER => TRUE,
            CURLOPT_FOLLOWLOCATION => 1,
        ];
        curl_setopt_array($chImagem, $options);
        $response = curl_exec($chImagem);
        curl_close($chImagem);
        $jsonResponse = json_decode($response);

        $imgReturn = 'data:image/png;base64,' . $jsonResponse->Dados;
        return [
            'cookie' => 'captcha_token='.$jsonResponse->Token,
            'viewState' => $inputViewStateValue,
            'eventValidation' => $inputEventValidationValue,
            'hiddenField1' => $inputHiddenField1Value,
            'hddServidorCaptcha' => $inputHddServidorCaptchaValue,
            'captchaBase64' => $imgReturn
        ];
    }

    public static function consulta($cnpj, $captcha, $stringCookie, $viewState, $eventValidation, $hiddenField, $servidorCaptcha)
    {
        $result = [];
        $ch = curl_init('http://www8.receita.fazenda.gov.br/SimplesNacional/Aplicacoes/ATBHE/ConsultaOptantes.app/ConsultarOpcao.aspx');

        $options = [
            CURLOPT_COOKIEJAR => 'cookiejar',
            CURLOPT_HTTPHEADER => [
                'Accept' => 'text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,*/*;q=0.8',
                'Accept-Encoding' => 'gzip, deflate',
                'Accept-Language' => 'pt-BR,pt;q=0.8,en-US;q=0.6,en;q=0.4',
                'Connection' => 'keep-alive',
                'Content-type' => 'application/x-www-form-urlencoded',
                'Cookie' => $stringCookie,
                'DNT' => 1,
                'Host' => 'www8.receita.fazenda.gov.br',
                'Origin' => 'http://www8.receita.fazenda.gov.br',
                'Referer' => 'http://www8.receita.fazenda.gov.br/SimplesNacional/Aplicacoes/ATBHE/ConsultaOptantes.app/ConsultarOpcao.aspx',
                'User-Agent' => 'Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/40.0.2214.93 Safari/537.36'
            ],
            CURLOPT_POST => TRUE,
            CURLOPT_RETURNTRANSFER => TRUE,
            CURLOPT_FOLLOWLOCATION => 1,
            CURLOPT_POSTFIELDS => [
                '__EVENTTARGET' => '',
                '__EVENTARGUMENT' => '',
                '__VIEWSTATE' => $viewState,
                '__EVENTVALIDATION' => $eventValidation,
                "ctl00\$ContentPlaceHolderConteudo\$$hiddenField" => $cnpj,
                'ctl00$ContentPlaceHolderConteudo$HiddenField1' => $hiddenField,
                'ctl00$ContentPlaceHolderConteudo$hddServidorCaptcha' => $servidorCaptcha,
                'ctl00$ContentPlaceHolderConteudo$txtTexto_captcha_serpro_gov_br' => $captcha,
                'ctl00$ContentPlaceHolderConteudo$btnConfirmar' => 'Consultar'
            ],
            CURLOPT_TIMEOUT => 20000,
            CURLOPT_CONNECTTIMEOUT => 20000
        ];
        curl_setopt_array($ch, $options);
        $response = curl_exec($ch);
        curl_close($ch);

        require_once __DIR__ . DIRECTORY_SEPARATOR . 'simple_html_dom.php';
        echo $response;exit();

        $html = str_get_html($response);
    }

}

consulta_cnpj_simples.php

/**
 * @var yii\web\View $this
 */
$this->title = 'Consulta CNPJ Simples Nacional';
try {
    $params = \app\common\components\consulta\ConsultaCnpjSimplesNacional::getParams();
} catch (Exception $e) {
    return Json::encode(['error' => 'error', 'mensagem' => $e->getMessage()]);
}
$form = ActiveForm::begin([
        'id' => 'form-consulta-cnpj',
        'enableClientScript' => false,
        'action' => Url::to(['consulta/processa-cnpj-simples'], true),
        'method' => 'POST'
    ]
);
?>
<img id="image_captcha" class="img-thumbnail" src="<?= $params['captchaBase64'] ?>"/><br/><br/>
<input type="hidden" id="cookie" name="cookie" value="<?= $params['cookie'] ?>">
<input type="hidden" id="viewState" name="viewState" value="<?= $params['viewState'] ?>">
<input type="hidden" id="eventValidation" name="eventValidation" value="<?= $params['eventValidation'] ?>">
<input type="hidden" id="hiddenField1" name="hiddenField1" value="<?= $params['hiddenField1'] ?>">
<input type="hidden" id="hddServidorCaptcha" name="hddServidorCaptcha" value="<?= $params['hddServidorCaptcha'] ?>">
<input type="text" name="input_captcha" id="input_captcha" placeholder="Digite o código da imagem">
<input type="text" name="cnpj" id="cnpj" placeholder="Digite o CNPJ" value="00175318000103">
<input type="submit" value="Enviar">
<?php ActiveForm::end();?>

ConsultaController.php

/**
* Processa a requisição de consulta por CNPJ;
*/
public function actionProcessaCnpjSimples()
{
    try {
        $post = Yii::$app->request->post();
        if (!isset($post['cnpj']) ||
            !isset($post['input_captcha']) ||
            !isset($post['cookie']) ||
            !isset($post['viewState']) ||
            !isset($post['eventValidation']) ||
            !isset($post['hiddenField1']) ||
            !isset($post['hddServidorCaptcha'])
        )
            throw new Exception('Informe todos os campos!', 99);

        $formatter = new Formatter();
        $cnpj = $formatter->customOnlyNumberFormat($post['cnpj']);
        $return['code'] = 0;
        $return['message'] = Yii::t('app', 'Dados encontrados!');
        $resultado = ConsultaCnpjSimplesNacional::consulta(
            $cnpj,
            $post['input_captcha'],
            $post['cookie'],
            $post['viewState'],
            $post['eventValidation'],
            $post['hiddenField1'],
            $post['hddServidorCaptcha']
        );
        //$return = array_merge($return, $resultado);
    } catch (\Exception $e) {
        $return = ['code' => $e->getCode(), 'message' => $e->getMessage()];
    }
    echo '<pre>';
    print_r($return);
    echo '</pre>';
}

Notem que, a estrutura atual está montada na framework Yii2 (não achei necessário incluir ela como tag), porém ela pode ser facilmente "desmontada" para implementar em qualquer outro lugar, visto que o "coração" é a classe ConsultaCnpjSimplesNacional.

Alguém já precisou implementar uma consulta para o Simples Nacional, ou poderia indicar algum caminho do motivo de não validar as imagens (captcha) ?

Link para o PHP Simple Html DOM Parser utilizado na classe para "desfragmentar" o html e pegar os valores dos campos.

Rafael Withoeft
  • 2,3mil
  • 15
  • 31