Gerador de robots.txt do Google
Apesar da sintaxe do robots.txt ser bem simples, algumas pessoas ainda se enrolam em gerá-lo, mesmo existindo
modelos prontos, em vários lugares da internet.
Verificando algumas informações na
Ferramenta para Webmasters do Google, achei uma ferramenta bem interessante, para geração do robots.txt.
A ferramenta é bem simples de usar, basta clicar no botão adicionar regra e selecionar [...]
Não crie uma gaiola para o Google
Com freqüência, recebo a seguinte reclamação:
Bruno, desde que implementei o
robots.txt que você sugeriu, minhas visitas vindas do Google despencaram, segui todas as dicas do artigo, inclusive adaptando para as URLs que uso, mas a situação só piora.
Então, vou verificar o blog da pessoa e me deparo com uma situação extremamente comum.
Foi criada uma gaiola [...]
-
Assine