Trabalhando em um site WordPress que ainda não está pronto para o lançamento? Provavelmente você não quer que páginas inacabadas apareçam nos resultados de busca antes que você esteja pronto.
Neste guia, mostraremos como controlar o rastreamento e a indexação por motores de busca no WordPress. Também explicaremos qual método usar para ocultar um site inteiro, uma página individual ou uma pasta específica.
Importante: Rastreamento Não é o Mesmo que Indexação
Muitos iniciantes impedem que motores de busca rastreiem seus sites quando, na verdade, o que eles querem é impedir a indexação. É importante entender a diferença entre eles.
Rastreamento é quando os bots de motores de busca visitam seu site para descobrir conteúdo. Indexação é quando eles adicionam esse conteúdo ao seu banco de dados pesquisável.
Pense nisso como um bibliotecário lendo um novo livro (rastreamento) e depois adicionando-o ao catálogo da biblioteca (indexação).
Isso importa porque bloquear o rastreamento nem sempre impede a indexação. Se o Google descobrir um URL bloqueado através de links de outros sites, ele ainda pode indexar o URL. Como o Google não pode rastrear a página, ele pode exibir “Nenhuma informação disponível para esta página” nos resultados de busca.
Quer saber se deve desativar o rastreamento ou a indexação em seu site? Aqui está um guia rápido:
| Caso de uso | O que fazer | Ferramenta certa |
|---|---|---|
| Ocultar um site inteiro que ainda não foi lançado | Bloquear todo o acesso | Configuração de Leitura do WordPress + proteção por senha |
| Remover uma página ou postagem do Google | Manter rastreável e impedir a indexação | Adicionar uma tag noindex |
| Afastar bots de uma pasta | Parar o rastreamento dessa pasta | robots.txt Não permitir |
Clique nos links abaixo para pular para o método de sua escolha:
- Método 1: Use a Configuração do WordPress para Desencorajar a Indexação
- Método 2: Pare de Indexar uma Página ou Postagem Individualmente
- Método 3: Edite Manualmente seu Arquivo robots.txt
- Método 4: Use X-Robots-Tag para Impedir a Indexação
- Método 5: Proteja o Site Inteiro com Senha Usando o cPanel
- Perguntas Frequentes sobre Como Impedir que Motores de Busca Rastrem um Site WordPress
Método 1: Use a Configuração do WordPress para Desencorajar a Indexação
O WordPress tem uma configuração integrada que pede aos motores de busca para não indexar seu site. Vá para Configurações » Leitura e marque ‘Desencorajar motores de busca a indexar este site.’
Quando você a ativa, o WordPress adiciona uma meta tag robots noindex,nofollow às suas páginas:
<meta name="robots" content="noindex,nofollow">
A diretiva noindex pede aos motores de busca para não incluir suas páginas nos resultados de busca, enquanto nofollow pede para que eles não sigam os links nessas páginas.
O WordPress também avisa que cabe aos motores de busca honrar essa solicitação. Em outras palavras, esta configuração pede aos motores de busca para não indexar seu site, mas não os impede de acessá-lo.
Se você quiser tornar impossível para os motores de busca indexarem ou rastrearem seu site, então você precisará proteger seu site WordPress com senha.
Método 2: Pare de Indexar uma Página ou Postagem Individualmente
Se você quiser que seu site permaneça nos resultados de pesquisa, mas quiser excluir uma página ou postagem do Google, adicione uma diretiva noindex a essa página.
A maioria dos plugins de SEO gratuitos para WordPress pode fazer isso. Usamos a versão gratuita do All in One SEO no WPBeginner, então mostraremos como funciona com ele. Primeiro, instale, ative e configure o plugin em seu site.
Em seguida, edite a postagem ou página que você deseja remover dos resultados de pesquisa. Role para baixo até Configurações do AIOSEO e mude para a aba ‘Avançado’. Desative ‘Usar configurações padrão’ e selecione ‘Não Indexar’.
Clique em ‘Atualizar’ ou ‘Publicar’ para salvar suas alterações. O AIOSEO agora adicionará a diretiva noindex à página, informando aos mecanismos de pesquisa para não incluí-la em seus índices.
Método 3: Edite Manualmente seu Arquivo robots.txt
Use robots.txt quando quiser dizer aos rastreadores para não rastrear uma parte específica do seu site WordPress, em vez de bloquear o site inteiro. Por exemplo, você pode impedir que os bots rastreiem uma pasta /private/ enquanto permite que eles rastreiem o restante do seu site.
O WordPress normalmente gera seu arquivo robots.txt automaticamente. Você pode visualizá-lo visitando seusite.com/robots.txt.
A maioria dos plugins de SEO para WordPress gratuitos, incluindo o All in One SEO, permite que você edite o robots.txt diretamente do seu painel do WordPress. Alternativamente, você pode criar ou editar um arquivo robots.txt no diretório raiz do seu site usando o gerenciador de arquivos de hospedagem ou FTP. Para instruções detalhadas, consulte nosso guia sobre como otimizar seu robots.txt do WordPress para SEO.
Depois de abrir o arquivo, copie o código abaixo para o seu arquivo robots.txt.
User-agent: *
Disallow: /private/
Certifique-se de substituir /private/ pelo caminho do URL que você deseja que os mecanismos de pesquisa parem de rastrear.
Método 4: Use X-Robots-Tag para Impedir a Indexação
Se você precisar manter um arquivo, como um PDF fora dos resultados de pesquisa, você pode usar o cabeçalho HTTP X-Robots-Tag. Ao contrário de uma meta tag robots, ele funciona com arquivos que não possuem uma página HTML onde você pode adicionar noindex.
Para servidores Apache, adicione o seguinte código ao seu arquivo .htaccess:
<FilesMatch ".pdf$">
<IfModule mod_headers.c>
Header set X-Robots-Tag "noindex"
</IfModule>
</FilesMatch>
Se você usa o AIOSEO, também pode editar seu arquivo .htaccess em All in One SEO » Ferramentas » Editor .htaccess.
Aviso: Editar o arquivo .htaccess pode quebrar seu site se feito incorretamente. Certifique-se de fazer backup do seu site WordPress ou fazer uma cópia do seu arquivo .htaccess antes de fazer qualquer alteração.
Método 5: Proteja o Site Inteiro com Senha Usando o cPanel
Se o seu site ainda está em construção e você deseja impedir que os mecanismos de pesquisa o acessem, você precisará habilitar a proteção por senha em todo o seu site. Isso bloqueia visitantes e rastreadores de acessar o site até que você remova a senha.
Se o seu provedor de hospedagem oferece cPanel, faça login na sua conta e abra ‘Privacidade do Diretório’ em ‘Arquivos’.
Encontre o diretório onde o WordPress está instalado. Geralmente é public_html. Se você tiver vários sites, abra public_html e selecione a pasta do site que deseja proteger.
Clique em ‘Editar’ ao lado do diretório. Na nova tela, marque ‘Proteger este diretório com senha’, insira um nome para o diretório protegido e clique em ‘Salvar.’
Em seguida, use a seção ‘Criar Usuário’ para inserir um nome de usuário e senha. Seu site agora exigirá esses detalhes de login antes que alguém possa acessá-lo, incluindo os rastreadores de mecanismos de pesquisa.
Lembre-se de que a proteção por senha no nível do servidor bloqueia todo o acesso ao site. Serviços externos, como gateways de pagamento ou cron jobs, podem não funcionar até que você remova a proteção.
Perguntas Frequentes sobre Como Impedir que Motores de Busca Rastrem um Site WordPress
1. Proteger meu site com senha prejudicará meu SEO quando eu estiver pronto para lançar?
Não. Proteger seu site com senha enquanto ele está em construção não prejudicará seu SEO. Assim que você remover a senha, os mecanismos de pesquisa poderão rastrear e indexar suas páginas normalmente.
2. Como desativo o SEO no WordPress?
O WordPress não tem uma configuração para “desativar o SEO”. Se você deseja manter seu site fora dos resultados de pesquisa, ative ‘Desencorajar mecanismos de pesquisa de indexar este site’ em Configurações » Leitura.
3. Como oculto meu site WordPress dos mecanismos de pesquisa enquanto testo?
Proteja o site com senha através do seu painel de hospedagem, se o seu provedor oferecer essa opção. Por exemplo, usuários do cPanel podem usar a Privacidade do Diretório para exigir um nome de usuário e senha antes que alguém possa acessar o site.
4. Qual é a diferença entre noindex e nofollow?
noindex informa aos mecanismos de pesquisa para não incluir uma página nos resultados de pesquisa. nofollow informa para não seguir os links dessa página. Eles controlam coisas diferentes e podem ser usados juntos quando necessário.
Esperamos que este artigo tenha ajudado você a impedir que os mecanismos de pesquisa rastreiem ou indexem seu site WordPress. Você pode querer ver nossa checklist de SEO para WordPress quando estiver pronto para lançar seu site.
Se você gostou deste artigo, por favor, inscreva-se em nosso Canal do YouTube para tutoriais em vídeo do WordPress. Você também pode nos encontrar no Twitter e no Facebook.
Oyatogun Oluwaseun Samuel
Uau!, Obrigado wpBeginner, eu nunca pensei em ativar a proteção por senha na pasta public_html. Obrigado por fornecer essa perspectiva. Muito obrigado!
Jiří Vaněk
Eu li que muitas vezes esses procedimentos, assim como o robots.txt, são apenas um comportamento recomendado para um robô. Como evitar ser pesquisado de verdade. É possível, por exemplo, bloquear os intervalos do Google e do Bing, por exemplo, com a ajuda de um arquivo .htaccess?
WPBeginner Support
Você usaria o método 3 ou 4 para bloquear completamente o acesso ao seu site.
Admin
Jiří Vaněk
Eu entendo isso, mas presumo que então o site não será público e apenas aqueles que souberem o login e a senha poderão acessá-lo? Minha ideia era apenas tentar encontrar os intervalos de IP dos bots e bloqueá-los no nível do arquivo htacess, por exemplo. Isso faz sentido ou é um absurdo?
WPBeginner Support
Não há garantia de que os bots não encontrem o site em uma data posterior com um IP diferente. Se você quiser ter certeza de que seu site não será rastreado, você vai querer que ele seja um site privado, caso contrário, a melhor opção é usar o robots.txt para solicitar que o site não seja rastreado.
Jiří Vaněk
Entendo e agradeço a resposta. Achei que poderia resolver bloqueando o intervalo, mas você está certo de que o bot pode vir de um IP diferente ou de um novo intervalo. Tentarei confiar no arquivo robots.txt e espero que tudo fique bem.
mohadese esmaeeli
A crença predominante está correta de que ter um grande número de páginas indexadas dentro de um site não afeta a indexação das outras páginas?
WPBeginner Support
Só porque você tem páginas indexadas em seu site não significa que você não possa ter outras páginas ocultas dos rastreadores para evitar a indexação.
Admin
Moinuddin Waheed
Eu estive várias vezes pensando, enquanto na aba de configurações do painel do WordPress, por que alguém iria querer desencorajar o Google a mostrar a página ou postagem da visibilidade. Hoje, de fato, depois de ler este post, eu vim a saber os motivos pelos quais alguém desencorajaria a indexação por motores de busca.
é muito simples de fazer, na verdade. precisamos marcar a caixa na seção de leitura da aba de configurações onde pergunta para desencorajar os motores de busca para a visibilidade.
Obrigado por esclarecer minha dúvida de longa data.
WPBeginner Support
Ainda bem que compartilhamos por que alguém usaria a caixa de seleção
Admin
Charlotte
Era exatamente o que eu estava procurando. Depois que movi meu site de desenvolvimento para o site principal do cliente, eu não queria nenhum tráfego voltando para o antigo. Obrigado!
WPBeginner Support
Ficamos felizes que nosso guia tenha sido útil
Admin
Ryan
Eu excluí meu site permanentemente do WordPress e, quando pesquiso meu nome no Google, o antigo site do WordPress ainda aparece, apesar do fato de ter sumido. Alguém da equipe de suporte pode me ajudar a excluí-lo? Não quero que meus clientes fiquem confusos com meu site real e ativo.
WPBeginner Support
Para o seu site antigo nos resultados do Google, se você rastrear o site como o Google, isso pode ajudar a atualizar o cache do Google. Para mais maneiras de remover completamente o site, você vai querer dar uma olhada em nossa postagem aqui: https://014.leahstevensyj.workers.dev/wp-tutorials/how-to-permanently-delete-a-wordpress-site-from-internet/
Admin
Divyanshu
se desativarmos a indexação do site WordPress para protegê-lo de hackers, isso afetará a indexação do Google ou não, e se sim, como permitir que o Google indexe minhas páginas
Andy
Não parece funcionar. Segui as instruções com confiança. Meu subdomínio ainda está publicamente visível.
WPBeginner Support
Olá Andy,
Se você protegeu seu diretório de subdomínio com senha, revise suas configurações novamente no cPanel. Se tudo parecer correto, você pode querer entrar em contato com seu provedor de hospedagem WordPress.
Admin
Jay
Sim, o que está escrito em “Desencorajar mecanismos de busca de indexar o site” é muito verdadeiro. O Google parece não honrar isso
chinju
Olá, tenho uma dúvida se um site com 1 milhão de subpáginas, o motor de busca bloqueia todas as subpáginas quando adicionamos
User-agent: *
Disallow: /
no arquivo robots?
Shekhar Sardar
Sim. Adicionar Disallow:/ no robot.txt dirá a todos os bots de mecanismos de busca para não rastrear este site ou página da web.
anand
quero que as páginas de associação e a página de perfil do membro não sejam indexadas por nenhum mecanismo de busca, como faço ????
Kenneth
Eu tentei isso, mas bagunçou meu .htccess para minha instalação do Wordpress.
Então, prossiga com cautela.
Joojo
Olá,
Atualmente, tenho um Blog Wordpress.com (Plano Gratuito) e desejo vender meus produtos digitais online sem configurar um site e dependendo totalmente do Blog, inicialmente (tenho tido falta de fundos). Assim, seguindo com essa ideia, fiz alterações no meu Blog, de modo que, após o pagamento, o cliente é redirecionado para a minha página do blog com um link para baixar o conteúdo digital. Portanto, eu só quero que o gateway de pagamento seja capaz de redirecionar o tráfego para a página de download no meu blog e que ela não seja pesquisável por mecanismos de busca, etc., e nem listada na lista de Posts/Páginas do Wordpress.com, etc., porque se a página de download for pesquisável pelos mecanismos de busca e listada nos posts do meu blog, eu não ganharei nada, pois o cliente faria o download direto do conteúdo sem fazer o pagamento.
Atenciosamente,
Joojo.
Jennifer
Estou aprendendo WP agora e projetando meu site. Por enquanto, não quero que o site seja rastreado, então marquei a Caixa de Visibilidade para Mecanismos de Busca e adicionei proteção por senha. No entanto, em alguns meses, quero que o site vá ao ar e quero visitantes no meu site. Se eu desmarcar a caixa de Visibilidade para Mecanismos de Busca e remover a proteção por senha, o cabeçalho nofollow dos robôs será atualizado automaticamente? Ou terei que atualizar manualmente na seção do cabeçalho?
WPBeginner Support
Sim, será. No entanto, para ter certeza extra, você precisa enviar o sitemap xml do seu site usando as ferramentas do Google webmaster. Isso permitirá que você veja se há algum erro de rastreamento encontrado em seu site.
Admin
Ryan
É possível bloquear apenas páginas específicas do seu site, em vez de bloquear o site inteiro?
Chad
O Wordpress oferece uma Opção de Proteção por Senha em qualquer uma de suas páginas e posts. Simplesmente altere a "visibilidade" na edição da sua página ou post para "protegido por senha".
Equipe WPBeginner
Por favor, dê uma olhada neste tópico.
Patrick
Como posso fazer o Google e o Bing rastrearem meu site, ao mesmo tempo em que impeço o SeMalt de rastrear meu site. O SeMalt envia tráfego para o meu site, fazendo parecer que tenho mais acessos, no entanto, esses cliques saem do meu site imediatamente e, ao fazer isso, aumentam a taxa de rejeição do meu site WordPress.
Qualquer ajuda sobre este assunto seria ótima.
Patrick
Pawan Reddy
Obrigado por esta dica. Eu não sabia que isso era possível