Quase todo webmaster tenta otimizar as páginas de seu site de forma a obter o maior número possível de elementos indexados. Mas em alguns casos, ao contrário, você precisa ocultar algumas páginas, por exemplo, um formulário para inserir dados cadastrais, recuperar senhas, etc.
É necessário
Editando o arquivo Robots.txt
Instruções
Passo 1
A maneira mais fácil de fechar a indexação de várias seções ou de um site inteiro específico é fazer as entradas apropriadas no arquivo robots.txt. Ele é usado como um guia para os motores de busca. Ao entrar nas páginas do site, o robô de busca refere-se a este arquivo, caso não esteja, indexa todo o site, caso contrário segue as recomendações especificadas neste arquivo.
Passo 2
Se você mesmo criou seu site e não possui esse aplicativo, na forma de um documento de texto indicando as proibições, é fácil criá-lo você mesmo. Abra um novo documento de texto, por exemplo, usando o programa Bloco de Notas. Coloque as seguintes linhas no corpo do documento: User-agent: * Disallow: /file.htmlDisallow: / directory /
etapa 3
Agora vamos descobrir o que você pediu ao mecanismo de pesquisa como uma tarefa. O sinal "*" oposto ao agente do usuário significa que esta instrução deve ser executada por absolutamente todos os sistemas de arquivos. Por exemplo, se você escrever “Yandex” em vez de “*”, este apelo será lido apenas pelo robô do mecanismo de busca Yandex. As instruções Disallow proíbem a indexação de uma seção específica (diretório) ou arquivo (arquivo.html).
Passo 4
Após compilar o arquivo robots.txt, você pode ir diretamente para os textos nas páginas do site. Como você sabe, os motores de busca não gostam de ter mais de 3 links externos ativos em suas páginas. E se você precisar de uma hemorragia nasal, mas postar 5 ou mais links. Nesses casos, você pode usar um atributo ou uma tag.
Etapa 5
Para fechar links da indexação pelo mecanismo de pesquisa do Google, você precisa trazer o link da seguinte forma: links de âncora. O corpo do atributo deve ser inserido em qualquer parte do link, não esquecendo de separá-lo com um espaço, ou seja, o atributo pode ser colocado entre "a" e "href" ou entre o link e sua âncora.
Etapa 6
Para fechar links da indexação pelo mecanismo de busca Yandex, você precisa trazer o link no seguinte formato: link de âncora. A tag é colocada no início e no final do link. Não se esqueça que esta tag está emparelhada: a segunda parte, ao contrário da primeira, vem com um sinal "/".
