DDD

També ho he implementat a la identificació de registres externs i la comparació amb els locals. En aquest cas, ignorar majúscules i minúscules és no només per dois, sinó també per qualsevol altre camp que identifiqui un registre: articleid, url, isbn, issn, títol de la revista, identificador oai, oaiset, pmcid i identificadors scopus i wos. De fet, això ajuda a fer més tolerant la cerca de registres d'una mateixa revista, que fins ara s'havia de posar seguint estrictament les majúscules i minúscules. Els accents, ara pera ara, s'han de conservar.

Per exemple:

• https://ddd.uab.cat/idregistres.py/search?q=10.1371/journal.pone.0118610
• https://ddd.uab.cat/idregistres.py/search?q=10.1371/joUrNAl.poNe.0118610
• https://ddd.uab.cat/idregistres.py/search?q=10.1371/JOURNAL.PONE.0118610

• https://ddd.uab.cat/idregistres.py/search?q=Enrahonar
• https://ddd.uab.cat/idregistres.py/search?q=enrahonar
• https://ddd.uab.cat/idregistres.py/search?q=enrAHonaR
• https://ddd.uab.cat/idregistres.py/search?q=ENRAHONAR

La solució torna a ser doble: a la base de dades ~/var/lib/oaiharvest/oaiharvest.db

[...]
CREATE TABLE external_bibidentifiers (
    recid                 text,
    bibfield              text,
    bibvalue              text COLLATE NOCASE,
    PRIMARY KEY           (recid, bibfield, bibvalue COLLATE NOCASE)
    );
CREATE TABLE local_bibidentifiers (
    recid                 int,
    bibfield              text,
    bibvalue              text COLLATE NOCASE,
    PRIMARY KEY           (recid, bibfield, bibvalue COLLATE NOCASE)
    );
[...]
CREATE INDEX external_bibidentifiers_bibvalue_idx
          ON external_bibidentifiers(bibvalue COLLATE NOCASE);
CREATE INDEX local_bibidentifiers_recid_idx
          ON local_bibidentifiers(recid);
CREATE INDEX local_bibidentifiers_bibfield_idx
          ON local_bibidentifiers(bibfield);
CREATE INDEX local_bibidentifiers_bibvalue_idx
          ON local_bibidentifiers(bibvalue COLLATE NOCASE);
[...]

I a ~/lib/python/oai_uabutils.py, funció def db_search_bibidentifiers canviar els diccionaris de recollir els valors (bibvalues i bibidentifiers), de {} a requests.structures.CaseInsensitiveDict()

A partir de demà també s'aplicarà a afegir nous identificadors externs a registres del DDD. No només dois. De fet, segurament tindrà alguna avantatge addicional. Per exemple, aquest registre:

https://ddd.uab.cat/record/726

Té una 035 i dos 856 de Racó, i les dues urls són vàlides (i jo em pensava que només en funcionaria una!)

035 __ $a oai:raco.cat:article/14920
856 41 $3 Adreça alternativa $u https://raco.cat/index.php/Analisi/article/view/14920
856 41 $3 Adreça alternativa $u https://raco.cat/index.php/analisi/article/view/14920

Per tant, la millora pels dois servirà també per no embrutar els registres amb altres casos.

Quedarà pendent eliminar aquests duplicats on només canviï les majúscules i minúscules (v també #6139)

Ja estan eliminades les etiquetes dels 99 registres amb els dois duplicats, encara que canviïn en les majúscules o minúscules. El programa es queda amb la primera 024 i elimina la segona.