Projecte

General

Perfil

Accions

Tasca #8600

tancat
FJ FJ

Impedir que els robots facin cerques al DDD

Tasca #8600: Impedir que els robots facin cerques al DDD

Afegit per Ferran Jorba fa més d'un any. Actualitzat fa aproximadament 1 any.

Estat:
Tancada
Prioritat:
Normal
Assignat a:
Categoria:
Tecnologia
Inici:
30-07-2024
Data de venciment:
30-07-2024
Paraula clau:

Descripció

En el darrer any l'ús i l'abús dels robots al DDD ha anat creixent, i hi ha hagut moments d'autèntica crisi perquè feia que el DDD no funcionava i donava errors 503 (Service unavailable).

Després de moltes altres solucions, el maig d'aquest 2024 n'hem posat un altre barrera: que els robots no puguin fer /search. En webs com el DDD, on els registres segueixen una seqüència numèrica, els cercadors ja acaben resseguint tots els registres, a més que també publiquem el sitemap.xml.


Tasques relacionades 3 (0 obertes3 tancades)

relacionat amb DDD - Incidència #6514: Sobrecàrrega pel robot de petalsearchTancadaFerran Jorba31-05-202130-07-2024Accions
relacionat amb DDD - Tasca #6117: Minimitzar els accessos a disc de l'Apache via caché de miniaturesTancadaFerran Jorba03-12-2020Accions
relacionat amb DDD - Incidència #5771: Gateway errors al DDD: augmentar número de processos?TancadaFerran Jorba20-05-2020Accions
Accions

També disponible a: PDF Atom