Projecte

General

Perfil

Accions

Tasca #4016

tancat
FJ FJ

Errors en la determinació del domini de les consultes

Tasca #4016: Errors en la determinació del domini de les consultes

Afegit per Ferran Jorba fa quasi 10 anys. Actualitzat fa aproximadament 9 anys.

Estat:
Tancada
Prioritat:
Normal
Assignat a:
Categoria:
Tecnologia
Temàtica prevista:
Inici:
12-05-2016
Data de venciment:
10-07-2016
Paraula clau:

Descripció

Acabo de veure que en alguns casos les estadístiques de consultes no mostren bé el domini d'Internet des d'on ens consulten, p. ex:

https://ddd.uab.cat/record/148976/usage

Els valors (extrets a partir del fitxer .csv) són aquests:

Països,,Consultes,Descàrregues
US,net::dns::domainname1035=hash(0x4bfe9f0),2,1
US,cuny.edu,1,1
US,neu.edu,1,0
US,net::dns::domainname1035=hash(0x324ce78),1,0
NL,net::dns::domainname1035=hash(0x4aa9648),2,0
NL,net::dns::domainname1035=hash(0x225d798),1,1
FR,net::dns::domainname1035=hash(0x3017bd8),3,0
TR,ulakbim.gov.tr,1,0
TR,net::dns::domainname1035=hash(0x3947d30),1,0
NO,uib.no,1,1
GB,dur.ac.uk,1,1
ES,ripe.net,1,0
ES,net::dns::domainname1035=hash(0x13d35e8),1,0
BD,net::dns::domainname1035=hash(0x2b90438),1,0

Cal veure l'abast del problema, d'on bé i quina solució hi ha.


Tasques relacionades 1 (0 obertes1 tancada)

relacionat amb DDD - Tasca #4750: Les estadístiques d'ús del novembre surten a zeroTancadaFerran Jorba17-11-201720-12-2017Accions

FJ Actualitzat per Ferran Jorba fa quasi 10 anys Accions #2

  • Estat ha canviat de Creada a En curs

L'error ha vingut amb el canvi de màquina i, per tant, de versió del programa que faig servir per resoldre adreces, jdresolve.

He recuperat del servidor antic (Homs) l'estat de la base de dades local d'adreces IP resoltes i ara està tornant a refer-la amb les adreces noves. Quan estigui reprocessaré la resta dels passos fins a actualitzar la base de dades d'estadístiques.

FJ Actualitzat per Ferran Jorba fa quasi 10 anys Accions #3

Després d'haver reprocessat mig abril i al maig fins avui, s'han arreglat part dels problemes, però sembla que n'hi ha uns altres:

Països,,Consultes,Descàrregues
US,cuny.edu,1,1
US,neu.edu,1,0
US,ucsc.edu.,1,0
FR,eu.,3,0
PH,ph.,1,1
NO,uib.no,1,1
GB,dur.ac.uk,1,1
TR,ulakbim.gov.tr,1,0

He de continuar amb el tema, pel què sembla...

FJ Actualitzat per Ferran Jorba fa quasi 10 anys Accions #4

La solució de Github sembla que segons com hi deixa un punt final al nom (ex: uab.cat.). Hi he suggerit una correcció (https://github.com/jdrowell/jdresolve/commit/71b9c86429c815933f42a2921dc9fbbe29c014fc) i ara mateix estic provant si funciona.

FJ Actualitzat per Ferran Jorba fa quasi 10 anys Accions #5

Mentre es resolen aquests noms, val la pena mirar si té alguna relació amb el fet que el més d'abril el número de consultes ha baixat de més de 600.000 entrades a 264.000. Alternativament, podria estar degut a qe durant uns dies les els dos servidors estaven actius, i, efectivament, o no vaig considerar que fos important juntar els logs de les dues màquines. Potser sí que val la pena, i m'ho apunto per fer-ho.

FJ Actualitzat per Ferran Jorba fa quasi 10 anys Accions #6

Sí, hi ha un embolic amb els fitxers de log, i el del mes d'abril havia quedat incomplert. S'havien barrejat els dos errors, i un tapava l'altra. Espero resoldre-ho aquest matí mateix.

FJ Actualitzat per Ferran Jorba fa quasi 10 anys Accions #7

El tema dels dominis d'internet s'ha arreglat correctament.

Pel que fa a la disminució de consultes el mes d'abril, he fet unes quantes operacions, incloent la recuperació dels fitxers de log d'Homs, unificar-los amb els de Mompou i tornar-los a processar. Els fitxers de log tenen aleshores un tamany similar, però un cop processats, es queden en aquests 260.000. No ho entenc. De moment ho deixo així i passo a altres temes; hi tornaré demà.

FJ Actualitzat per Ferran Jorba fa quasi 10 anys Accions #8

  • Estat ha canviat de En curs a Tancada

Sentint-ho molt, i després d'haver-ho repassat del dret i de l'inrevés, no sé explicar, trobar o entendre per què el mes d'abril hi ha aquesta baixada. Es corresponen el mes que vam fer el canvi de servidor, però ja he unificat els logs de les dues màquines, i, a més, hi ha xifres ben baixes tant en els primers dies del mes (quan el DDD s'allotjava a Homs) com a finals de mes (a Mompou).

Tanco la tasca, perquè el motiu original (la resolució dels noms) ja funciona, i aquest altre incident, que pensava solucionar mentrestant, no he pogut.

NC Actualitzat per Núria Casaldaliga fa quasi 10 anys Accions #9

  • Paraula clau s'ha establert a JR

CA Actualitzat per Cristina Azorin fa més de 9 anys Accions #10

  • Data de venciment s'ha establert a 10-07-2016
  • Prioritat ha canviat de Alta a Normal

CA Actualitzat per Cristina Azorin fa aproximadament 9 anys Accions #11

  • Paraula clau s'ha suprimit (JR)

FJ Actualitzat per Ferran Jorba fa més de 8 anys Accions #12

  • S'ha afegit relacionat amb Tasca #4750: Les estadístiques d'ús del novembre surten a zero
Accions

També disponible a: PDF Atom