Muitos proprietários de sites enfrentam o problema de proibir a indexação de recursos e sua remoção dos mecanismos de pesquisa. Isso geralmente acontece porque o site se torna desatualizado e irrelevante, o editor ou visitantes perdem o interesse no site, ou o site contém informações pessoais e até confidenciais.
Instruções
Passo 1
Existem muitas maneiras de remover um site dos mecanismos de pesquisa.
A primeira e mais fácil maneira de excluir os resultados da consulta do mecanismo de pesquisa é excluir a página do próprio site ou excluir completamente o site CMS por meio de uma conexão FTP. Em alguns dias, o mecanismo de pesquisa atualizará o banco de dados e removerá o link para o seu recurso dos resultados da pesquisa.
Passo 2
A maneira mais popular entre os webmasters de proteger um site, suas seções ou páginas individuais da indexação e, assim, remover links dos resultados de pesquisa, é editar o arquivo robots.txt.
Você pode fechar uma página separada da indexação usando o código:
Agente de usuário: *
Disallow: /page.html (fechando a página page.html)
Existem muitas instruções do autor sobre como usar códigos para um arquivo robots.txt na Internet.
etapa 3
A terceira maneira de remover páginas do site dos mecanismos de pesquisa é usar a metatag de robôs em suas páginas. A tag é escrita no código HTML das páginas ocultas entre as tags.
Assim, após reindexar o site PS, as páginas com essa metatag sairão da pesquisa. A desvantagem desse método é que muitos sites modernos usam modelos tpl, o que significa que você terá que alterar manualmente o código em centenas, talvez milhares de páginas.
Passo 4
A quarta maneira de remover sites dos mecanismos de pesquisa é usando cabeçalhos X-Robots-Tag. A essência deste cabeçalho é semelhante ao uso da meta tag anterior, no entanto, a entrada deve estar localizada nos cabeçalhos
Tag X-Robots: noindex, nofollow
Etapa 5
A maneira mais eficaz de remover um site (totalmente) dos mecanismos de pesquisa é removê-lo do painel do webmaster. Após a atualização (3 a 7 dias), o site ficará inacessível ao mecanismo de busca. O painel do webmaster está disponível para os mecanismos de pesquisa Yandex (https://webmaster.yandex.ru/delurl.xml) e Google (https://webmaster.yandex.ru/delurl.xml).