Accions
Tasca #3133
tancat
CA
FJ
Millores per als robots
Tasca #3133:
Millores per als robots
Estat:
Tancada
Prioritat:
Normal
Assignat a:
Categoria:
-
Temàtica prevista:
Inici:
23-10-2014
Data de venciment:
Paraula clau:
Descripció
https://ddd.uab.cat/robots.txt
Afegir /rev
I mirar si es pot limitar per a que no entrin en els fitxers txt
FJ Actualitzat per Ferran Jorba fa més de 11 anys
- Estat ha canviat de Creada a Tancada
El /rev era fàcil. Pel que fa als .txt, espero haver-ho fet bé amb el «/*.txt$», seguint les recomanacions que m'he trobat:
- http://searchengineland.com/a-deeper-look-at-robotstxt-17573
- http://tools.seobook.com/robots-txt/
- https://productforums.google.com/forum/#!topic/webmasters/87FzZaFlzGk
I l'eina de verificació de Google, que acabo de trobar avui mateix:
Suposo que haurem d'esperar uns dies que reculli el nou fitxer robots.txt, però entenc que puc tancar la tasca.
Accions