A tarefa de remover páginas individuais ou todo o site dos motores de busca é enfrentada por um webmaster ao alterar informações, alterar um domínio, combinar vários recursos e uma série de outros motivos. Existem várias maneiras de resolver o problema, dependendo do resultado desejado.
Instruções
Passo 1
Exclua a página a ser desindexada para que o servidor retorne uma mensagem de erro ao tentar navegar para a página da web selecionada HTTP / 1.1 404 Not Found. Para aplicar as alterações selecionadas, você deve esperar que o robô acesse novamente a página necessária.
Passo 2
Use o arquivo raiz do robô robots.txt para excluir seções ou páginas selecionadas da indexação do mecanismo de pesquisa. Para evitar a exibição do painel de administração no mecanismo de busca, use o comando: User-Agent: * Diaallow: / admin / Ou, para excluir a página selecionada da indexação, digite o valor: User-Agent: * Disallow: / selected_page.html # Para aplicar as alterações, o robô deve visitar novamente a página selecionada.
etapa 3
Use o método de metatag para adicionar uma regra especificada no código HTML a todas as páginas necessárias: Isso é necessário para excluir páginas indesejadas do mecanismo de pesquisa.
Passo 4
Selecione um método para criar X-Robots-Tag para introduzir comandos no cabeçalho http que não são exibidos no código da página: X-Robots-Tag: noindex, nofollow Este método é mais útil para excluir páginas ou seções selecionadas da indexação de motores de pesquisa estrangeiros.
Etapa 5
Use uma página de controle de webmaster especial no Yandex: https://webmaster.yandex.ru/deluri.xml ou no Google: https://www.google.com/webmasters/tools. Isso é feito para proibir a exibição do página, seção ou site inteiro no mecanismo de pesquisa selecionado.