Às vezes, um webmaster precisa remover uma das páginas indexadas do mecanismo de pesquisa. Na maioria das vezes, essa operação é utilizada após inserir o endereço da página por engano na lista geral do mapa do site. Ao mesmo tempo, especialistas da empresa Megafon encontraram esse erro (mensagens sms tornaram-se disponíveis para qualquer usuário do mecanismo de busca Yandex).
É necessário
Site pessoal
Instruções
Passo 1
Uma das maneiras mais fáceis de remover sua própria página da web dos arquivos dos mecanismos de pesquisa é excluí-la fisicamente, alterar o endereço do local e excluí-la falsamente (você precisa definir o atributo da página excluída). Depois de transformar esta página, o robô de pesquisa verá a seguinte linha em vez do conteúdo: HTTP / 1.1 404 Não encontrado. No entanto, não se esqueça de que os robôs de pesquisa podem visitar o site a cada 3 horas, e talvez uma vez a cada 2-3 dias. Portanto, você precisa esperar um pouco para obter o resultado.
Passo 2
A próxima maneira é editar o arquivo robots.txt, que determina o caminho do rastreador assim que ele chega ao seu site. Este documento de texto sempre tem um local - a raiz do site. No primeiro parágrafo, os parâmetros de indexação para o robô Yandex são geralmente indicados (ele difere marcadamente de outros robôs), no segundo parágrafo para todos os outros motores de busca.
etapa 3
No início do parágrafo, deve-se especificar o título do agente "User-Agent: *" e os endereços das páginas a serem ocultadas - "Disallow: /wp-content/foto/fotojaba.html". Da mesma forma, você deve especificar os endereços das páginas ou seções que deseja fechar da indexação. Observe que este método não fornece resultados rápidos. Se o seu site tem baixa atividade e as notícias não são veiculadas nas redes sociais, o processamento dos novos dados pode chegar a vários dias. Além disso, você precisará excluir as versões dessas páginas do arquivo do serviço de pesquisa.
Passo 4
Um método alternativo para definir links no arquivo robots.txt é usar a metatag de robôs com o mesmo nome. A sintaxe para esta tag é a seguinte: ela deve ser colocada entre as tags [head] e [/head] emparelhadas. O valor de robôs deve ser colocado na meta tag de nome. Um exemplo ficaria assim:.