O que significa o Noindex
Noindex controla a apresentação no índice, não o acesso. Material sensível precisa de autenticação ou remoção; o robots.txt é uma instrução de rastreamento e pode impedir que um rastreador veja o meta noindex.
Noindex é uma diretiva de robôs que pede aos rastreadores de busca que seguem as regras que não mostrem uma página ou recurso nos resultados, enquanto a URL pode continuar acessível a visitantes e links.
Um fluxo prático de inspeção
Use a meta robots em páginas HTML e o X-Robots-Tag em recursos que não são HTML. Mantenha a diretiva visível ao rastreador e deixe explícito o estado de indexação pretendido para a página.
O que verificar
Busque o HTML renderizado e os cabeçalhos de resposta, verifique a diretiva, confira na Inspeção de URL e aguarde o tempo para um novo rastreamento antes de avaliar a remoção.
Limites e erros comuns
Não bloqueie uma URL no robots.txt esperando que o Google leia de forma confiável a diretiva noindex dela, nem use noindex como controle de privacidade.
Antes de adicionar noindex, explique o motivo de negócio e do usuário para manter a URL acessível, mas fora da busca. Casos comuns são uma página de resultados internos, um estado temporário de campanha ou um ambiente de staging. Depois, escolha o método de entrega correto, adicione uma verificação de regressão e registre a condição prevista para reverter a diretiva. Em staging, trate o noindex como uma das barreiras de liberação ao lado de controles de acesso e verificações de prontidão para produção, nunca como a única proteção de conteúdo confidencial.
Como a diretiva é interpretada
Use <meta name="robots" content="noindex"> em um documento HTML ou X-Robots-Tag: noindex em uma resposta HTTP; o cabeçalho também pode controlar recursos que não são HTML. Não bloqueie uma URL no robots.txt quando o Google precisa rastreá-la para ver a diretiva noindex.