Biblioteca·SOP·SEO
Compare o robots.txt público ao editor Rank Math, preserve as regras existentes e valide uma alteração restrita com evidências e caminho de reversão.
Última revisão: · Revisão editorial
Clareza, estrutura e referências revisadas nesta versão. Não equivale a um teste em uma conta real.
Compare o robots.txt público com o editor do Rank Math, preserve as regras atuais e a linha Sitemap existente, faça uma alteração restrita de rastreamento sustentada por evidências e releia o arquivo público e as URLs principais. robots.txt controla o acesso de rastreadores; não protege informações privadas nem remove URLs dos resultados de busca de forma confiável.
Este SOP abrange:
Não abrange:
Primeiro confirme que uma regra de rastreamento é a ferramenta adequada. Depois registre o arquivo que os rastreadores realmente conseguem buscar, antes de abrir o Rank Math.
Abra o Plano de ação de SEO técnico fornecido, faça sua própria cópia e use Start here para preencher o site e a data da revisão de hoje.
Use robots.txt apenas para gerenciar acesso de rastreadores a um caminho público de URL. Ele é texto público, não uma senha: não liste segredos nem dependa dele para proteger arquivos de clientes. Se o objetivo for ocultar dados privados ou remover uma página do Google, pare e peça ao proprietário que use controles de acesso ou o método correto de noindex/remoção.
Em um navegador, abra https://your-site.example/robots.txt usando o mesmo host das páginas públicas relevantes. Substitua o host do exemplo pelo host do site; www e sem www, assim como http e https, podem ter arquivos robots diferentes.
Em Action plan, adicione uma linha para esta URL de robots.txt. Copie todo o texto público em What you found e registre quando o leu.
Se /robots.txt estiver ausente, mostrar erro ou retornar uma página comum em vez de regras, registre o observado e peça ao responsável pelo WordPress ou hospedagem que confirme o que os rastreadores recebem. Ainda não presuma que o editor do Rank Math controla o arquivo ativo.
No WordPress, abra Rank Math SEO. Em Dashboard, mude para Advanced Mode no canto superior direito se necessário e escolha General Settings → Edit robots.txt.
Observe o campo de texto. Se contiver texto, Rank Math tem um valor personalizado salvo. Se estiver vazio e aparecerem padrões em cinza, essas palavras são placeholders e nenhum valor personalizado está salvo no Rank Math. Registre o estado do editor em Action plan → What you found.
Se o campo contiver texto salvo, compare suas regras com o arquivo público. Se estiver vazio, use a resposta pública como linha de base. Uma observação genérica de que arquivos físicos podem sobrepor Rank Math não prova que este site tenha um.
Se Rank Math disser que o arquivo está bloqueado, seu texto salvo não corresponder à resposta pública ou a URL pública apresentar erro, pare. Registre a diferença e pergunte ao responsável pelo WordPress ou hospedagem qual arquivo está ativo. Não exclua nem edite um arquivo físico do servidor como parte deste guia.
Uma regra de robots altera se os rastreadores podem buscar URLs correspondentes. Escolha um motivo e caminho exatos e confira o que mais a regra corresponderia antes de salvar.
Leia as regras ativas e identifique um problema real: restrinja ou remova uma regra que bloqueia uma página pública importante, ou adicione uma regra para um caminho específico de baixo valor que o proprietário confirme ser desnecessário aos rastreadores. Disallow instrui os rastreadores nomeados a não buscar caminhos correspondentes. Se a revisão não encontrar problema claro, registre o motivo em Action plan, defina Status como No change needed e pule a edição.
Confira o conteúdo do caminho-alvo. Garanta que não contenha páginas, imagens, folhas de estilo ou scripts importantes necessários ao Google para entender essas páginas. Nunca bloqueie caminhos de CSS ou JavaScript como atalho.
O caminho de uma regra começa na raiz do site e diferencia maiúsculas de minúsculas. Por exemplo, Disallow: /catalog/previews/ corresponde a esse caminho e seus descendentes, mas não a /Catalog/previews/ nem a /catalog/previews sem a barra final. User-agent nomeia o grupo de rastreadores. O Google seleciona o grupo correspondente mais específico; por isso um grupo específico pode não herdar regras de *. Dentro do grupo, vence o caminho mais específico; o Google permite a URL se caminhos igualmente específicos entrarem em conflito. Consulte o responsável técnico se os grupos ou caminhos tornarem o resultado incerto.
Preserve todas as regras públicas, exceto a única que pretende alterar. Isso inclui regras existentes de administração, AJAX e WooCommerce. Se houver uma linha Sitemap, preserve a URL completa exatamente como está escrita.
Em Action plan, coloque a URL de robots.txt e o caminho-alvo em Page or issue, a linha de base pública completa e o motivo em What you found, e a linha exata proposta em Next action. Explique por que o caminho deve mudar em Why this comes first, identifique o responsável pelo WordPress e coloque a data de hoje em Review date. Em Result / how to undo, registre o estado original do editor: vazio ou o texto salvo completo. Se o texto for longo demais para a célula, use uma nota de recuperação aprovada e registre sua localização. Defina Status como In progress antes de editar.
Faça somente a alteração registrada e confira o arquivo público e caminhos importantes. A releitura pública — não a mensagem de salvamento do editor — é a prova de que os rastreadores podem receber as regras pretendidas.
Se registrou o arquivo público, o editor permite edição e o caminho proposto é seguro, prepare apenas a regra registrada em Action plan. Use o grupo User-agent existente correspondente. Se o editor estiver bloqueado ou não houver grupo correspondente claro, pare e consulte o responsável pelo WordPress.
Se o editor estava vazio, com padrões apenas como placeholders cinza, cole toda a linha de base pública salva e adicione a regra planejada. Inclua a linha de base completa para preservar as regras existentes. Se o editor já continha texto salvo, altere somente a linha planejada e mantenha o restante.
Clique em Save Changes uma vez. Abra a URL pública /robots.txt em uma nova aba ou recarregue para ler a resposta real.
Se o texto público não tiver a regra, tiver mudado outras linhas ou bloquear um caminho importante, restaure o estado original do editor: limpe o campo se originalmente estava vazio, ou restaure todo o texto original salvo se não estava vazio. Clique em Save Changes e releia /robots.txt. Se a resposta pública não corresponder à linha de base original, peça ao responsável pelo WordPress ou hospedagem que conclua a reversão.
Compare a regra com o caminho da URL-alvo e o caminho de página/recurso importante registrado. Confirme que o alvo corresponde conforme pretendido e que o caminho importante não corresponde a uma regra disallow. Abra a página pública importante e confirme que ainda carrega e tem aparência normal.
Registre a releitura pública e as verificações de URLs em Result / how to undo. Defina Status como Done somente se as verificações do arquivo e da página protegida passarem. Se o editor e o arquivo público divergirem ou uma verificação falhar, defina Waiting e identifique quem deve resolver. Se nenhuma regra se justificar, registre a decisão e defina Status como No change needed.
O Google pode manter robots.txt em cache por até 24 horas ou mais se não conseguir atualizar o arquivo. Uma releitura pública bem-sucedida confirma a resposta atual do site; não confirma quando o Google rastreará novamente. Se o objetivo for alterar se uma página aparece na Busca, use o método adequado de indexação com o proprietário. Uma regra de robots isolada não garante remoção.
