Tasca #4358
tancatAplicar criteris geogràfics a sota del nivell de país per les estadístiques d'ús
Descripció
Canviar l'estadística actual de proveïdors d'internet pel segon nivell que estableixi geoip
PR Actualitzat per Pere Roca fa quasi 9 anys
- Data de venciment ha canviat de 01-06-2017 a 31-12-2017
FJ Actualitzat per Ferran Jorba fa més de 8 anys
- Assignat a ha canviat de Ferran Jorba a Javier Planella
Aquest matí hem estat comentant la tasca amb el Javier perquè l'assumeixi ell. Hem estat valorant diferents estratègies i crec que ara tenim força clar quina és la millor manera de fer-ho.
JP Actualitzat per Javier Planella fa més de 8 anys
- Paraula clau ha canviat de JR a JR TLT
A la tercera columna dels fitxers /home/ddd/var/log/geoipcache_a*.tab ara mateix esta el proveïdor d'Internet (jazztel.es, ono.com, uab.es....) i es te que posar el geogràfic.
A partir dels fitxers: /home/ddd/var/log/dnscache_a*.tab es generen els /home/ddd/var/log/geoipcache_a*.tab. Això ho fa el programa "geoipcache.py"
Modificat geoipcache.py per tindre al fitxers: /home/ddd/var/log/geoipcache_a*.tab el geogràfic, en lloc del proveïdor d'Internet.
FJ Actualitzat per Ferran Jorba fa més de 8 anys
- Assignat a ha canviat de Javier Planella a Ferran Jorba
Vists que les dades (logs i caché de noms i zones geogràfiques) històriques no estan prou normalitzades, hem acordat que em quedi jo la tasca, perquè el Javier no pot saber quines circumstàncies van causar-les, i així les normalitzo i ho deixo bé.
FJ Actualitzat per Ferran Jorba fa més de 8 anys
- Estat ha canviat de Creada a En curs
Ja es comencen a veure alguns resultats en els registres (les col·leccions encara no). Per exemple:
- https://ddd-test.uab.cat/record/27613/usage
- https://ddd-test.uab.cat/record/27612/usage
- https://ddd-test.uab.cat/record/60833/usage
A mesura que es vagin reprocessant tots els anys, sota dels països anirant desapareixent els noms dels dominis d'internet i aniran apareixent regions. Fixeu-vos també que ha aparescut un país nou!
Com que el volum és molt gran, tot plegat trigarà una mica, i segurament apareixeran coses estranyes que hauré d'anar corregint.
FJ Actualitzat per Ferran Jorba fa més de 8 anys
Al DDD de proves ja està completament implementat, fins i tot per les col·leccions:
- https://ddd-test.uab.cat/usage.py?c=ddd&report=usage
- https://ddd.uab.cat/usage.py?c=ddd&report=usage
Hi ha un decalatge, sembla que menor, entre les que surten d'un DDD i de l'altre. Per calcular les estadístiques per col·lecció cal consultar la llista de col·leccions i quins registres en formen part, i com que al DDD de proves aquestes dades no estan actualitzades, això pot explicar el decalatge. En faré una prova (no visible) executant-lo al DDD de producció per estar segurs que les diferències són menors.
CA Actualitzat per Cristina Azorin fa més de 8 anys
- Assignat a ha canviat de Ferran Jorba a Núria Casaldaliga
El Ferran ha sincronitzat els programes i ho ha deixat tot preparat perquè, si cal, el cap de setmana es pogués reprocessar tots els logs d'11 anys, que eren, segons les proves, unes 12 hores.
Cal indicar quan volem que es faci aquest canvi i fer un SB21 per a notificar-ho a les biblioteques.
CA Actualitzat per Cristina Azorin fa més de 8 anys
- Assignat a ha canviat de Núria Casaldaliga a Ferran Jorba
Decidim fer aquest canvi durant les festes de Nadal d'aquest 2017.
CA Actualitzat per Cristina Azorin fa més de 8 anys
- S'ha afegit relacionat amb Tasca #4750: Les estadístiques d'ús del novembre surten a zero
FJ Actualitzat per Ferran Jorba fa més de 8 anys
Finalment quedem que a la columna de la dreta:
- Canviem l'epígraf "Accessos per països i dominis" per:
- Català: Accessos per àmbit geogràfic
- Castellà: Accesos por ámbito geográfico
- Anglès: Geographic domain hits
- Canviem la columna: "Països" per "Geogràfic", "Geográfico" o "Geographic"
I separem Catalunya. Ho reprocessaré per nadal. Tot l'històric.
FJ Actualitzat per Ferran Jorba fa aproximadament 8 anys
Ferran Jorba va escriure:
Finalment quedem que a la columna de la dreta:
- Canviem l'epígraf "Accessos per països i dominis" per:
- Català: Accessos per àmbit geogràfic
- Castellà: Accesos por ámbito geográfico
- Anglès: Geographic domain hits
- Canviem la columna: "Països" per "Geogràfic", "Geográfico" o "Geographic"
Fet.
I separem Catalunya. Ho reprocessaré per Nadal. Tot l'històric.
Comencem!
FJ Actualitzat per Ferran Jorba fa aproximadament 8 anys
- Estat ha canviat de En curs a Tancada
Doncs jo crec que ha quedat ben bonic!
CA Actualitzat per Cristina Azorin fa aproximadament 8 anys
- Paraula clau ha canviat de JR TLT a TLT