Resultados da Pesquisa
Tipo da pesquisa | Sintaxe da busca |
---|---|
Tags | [tag] |
Exatamente | "palavras aqui" |
Autor |
user:1234 user:me (seu) |
Pontuação |
score:3 (3+) score:0 (nenhum) |
Respostas |
answers:3 (3+) answers:0 (nenhum) isaccepted:yes hasaccepted:no inquestion:1234 |
Visualizações | views:250 |
Código | code:"if (foo != bar)" |
Seções |
title:maçãs body:"maçãs laranjas" |
URL | url:"*.example.com" |
Saves | in:saves |
Status |
closed:yes duplicate:no migrated:no wiki:no |
Tipos |
is:question is:answer |
Excluir |
-[tag] -maçãs |
Para obter mais detalhes sobre a pesquisa avançada visite nossa página de ajuda |
2 resultados
O caminho pré definido de URL "/robots.txt" contém instruções para crawlers/raspadores de internet - Não utilize esta tag para questões que não sejam específicas sobre esse tema. Não use para outros tipos de "robôs de automação", nem para SEO, apenas para questões de desenvolvimento que envolvam interação com o "robots.txt" (geração estática ou dinamica, ambos via programação, algoritmos para acessar e interpretar, etc).
3
votos
Ordem dos comandos no robots.txt
Não vai bloquear, as regras não são necessariamente "em ordem", as regras com o "nome" citado tem "preferência" sobre um wildcard/curinga (*), como no próprio exemplo do suporte google:
https://supp …
1
voto
Aceito
Como usar um Robots.txt no Github pages
Se é githubpages então é um subdominio algo como silas333.github.io, logo é só subir no seu repositório normalmente o robots.txt, eu tenho um site no githubpages e funciona normal: https://inphinit.github.io … /robots.txt
O que você não pode criar é um robots.txt para a página do teu repositório, que é algo totalmente diferente do subdominio do githubpages, ou seja o dominio github.com você não tem controle …