Tasca #3718
tancatCàrrrega al DDD de registres del grup de recerca GSD
Afegit per Tomas Fabregat fa més de 10 anys. Actualitzat fa aproximadament 9 anys.
Descripció
Hem rebut la producció científica del grup GSD segons condicions pactades prèviament amb Ferran. Cal fer el pas massiu al DDD (ve de la tasca #3339)
Tasques relacionades 3 (0 obertes — 3 tancades)
TF Actualitzat per Tomas Fabregat fa més de 10 anys Accions #1
Ferran, tenim els txt segons vam pactar a #3339 i els pdf associats. Com hauríem de procedir a partir d'ara per fer-ho el màxim de fàcil?
FJ Actualitzat per Ferran Jorba fa més de 10 anys Accions #2
Gràcies, Tomàs, per fer tota aquesta feina de recollida d'exemples i contactes.
La meva opinió és que valdria la pena fer una reunió presencial per veure com la podem fer, aquesta automatització. Crec que també hi hauria de ser la Cristina. Si em convoques via Outlook, vindré igualment encara que tingui teletreball, cap problema. Ja costarà prou trobar un dia que ens vagi bé a tots...
FJ Actualitzat per Ferran Jorba fa més de 10 anys Accions #3
- S'ha actualitzat Descripció (diferències)
FJ Actualitzat per Ferran Jorba fa més de 10 anys Accions #4
- Tema ha canviat de carrega al DDD de registres del grup de recerca GSD a Càrrrega al DDD de registres del grup de recerca GSD
Acabo de fer una primera càrrega, encara provisional, al DDD de proves, i sense PDFs, de tots els articles:
FJ Actualitzat per Ferran Jorba fa més de 10 anys Accions #5
Pel que fa als procediment que seguirem en el futur, d'acord amb com m'ha explicat el Tomàs, sabem que el grup de recerca prefereix fer una o dues càrregues anuals, i que cada any publiquen uns 80-100 articles, aproximadament.
Les exportacions que li han passat al Tomàs consisteixen en un fitxer amb extensió .txt amb el conjunt dels registres bibliogràfics etiquetats segons BibTeX, i un fitxer zip amb tots els PDFs. Hi ha una correspondència un-a-un entre el camp file: dels registres bibligràfics i els PDFs. La meva proposta incicial, doncs, seria afegir-hi el fitxer amb els registres bibliogràfics al zip dels PDFs i pujar-lo al DDD via un programa específic per al Tomàs, generar els registres i lligar-los als PDFs.
De tot això en farem proves a la instal·lació de proves del DDD, com aquesta primera càrrega inicial.
FJ Actualitzat per Ferran Jorba fa més de 10 anys Accions #6
D'acord amb el Tomàs, he fet una segona càrrega amb els següents canvis:
- Canviat el 980 $b de GSD per GSDUAB, a petició del Tomàs.
- Canviat la 540 $a per "Tots els drets reservats.", a petició de la Cristina.
- Canviada la 035 $9 per aigaionid (el seu sistema d'identificació), perquè crec que és més únic (i, per tant, cercable amb més precisió), idea meva.
http://ddd-test.uab.cat:2000/search?ln=ca&cc=artpub&p=gsduab
Li he plantejat al Tomàs uns altres dubtes que he tingut mentrestant i que ell ja farà per preguntar-ho al grup de recerca.
CA Actualitzat per Cristina Azorin fa més de 10 anys Accions #7
- Paraula clau ha canviat de gsd a gsd JR
TF Actualitzat per Tomas Fabregat fa aproximadament 10 anys Accions #8
Hola Ferran,
Fent repàs de les qüestions pendents, Joan Torregrossa va dir Sí (email 11/12/15) a totes les qüestions plantejades:
-Cap problema per canviar el nom dels Pdf
-li semblen bé els canvis de nomenclatura LATEX. Hi ha casos que creiem que es podria simplificar la notació. Per exemple:
http://ddd-test.uab.cat:2000/record/140318?ln=ca
First integrals of {D}arboux type for a family of 3-dimensional {L}otka-{V}olterra systems
First integrals of Darboux type for a family of 3-dimensional Lotka-Volterra systems
-Sí podem mantener núm. d’ID d’agaion en el nostres registres. D’aquesta manera podrem retornar-te una llista d’ID – URL DDD
TF Actualitzat per Tomas Fabregat fa aproximadament 10 anys Accions #9
Ferran,
així que puguis, podríem provar de fer la càrrega de 2015, sigui total o parcial, com tu ho vegis millor i més segur?
FJ Actualitzat per Ferran Jorba fa aproximadament 10 anys Accions #10
Tomàs,
ja he fet una recàrrega amb unes quantes correccions: les que esmentaves ({} i noms dels fitxers) i altres que he vist mentrestant, com que no hi havia 773, i que ara ja hi apareix.
Manca encara enllaçar-ho amb els PDFs.
FJ Actualitzat per Ferran Jorba fa aproximadament 10 anys Accions #11
He estat considerant el tema de l'identificador extern d'aquests documents. Google m'ha fet descobrir que això d'Aigaion és una aplicació web lliure que es pot trobar a la xarxa (https://en.wikipedia.org/wiki/Aigaion). Per tant, consignar el nom aigaionid com a 035 podria, hipotèticament, portar-nos a duplicats. Em permeto, doncs, canviar-lo per gsduab. Aprofitaré aquest identificador per a la 856, ja que ens permeterà tenir un número preassignat abans de carregar els registres, i podré enllaçar-los fins i tot des del DDD de proves.
FJ Actualitzat per Ferran Jorba fa aproximadament 10 anys Accions #12
Ja estan recarregats i lligats amb els PDFs, de moment només els del 2015:
FJ Actualitzat per Ferran Jorba fa aproximadament 10 anys Accions #13
Tomàs,
quin creus que ha de ser el següent pas? Carregar-los tots a proves? Carregar els del 2015 al DDD públic?
TF Actualitzat per Tomas Fabregat fa aproximadament 10 anys Accions #14
Hola Ferran,
Els carregaria seguint aquesta sequència: carregaria ja tot el 2015 a públic així que puguis ; en segon lloc, ja carregaria la resta a proves i, així que hi haguem donar una ullada, els carreguem a públic.
Abans, però, et comento alguns temes que es desprenen d'haver fet una cata del que estan a proves:
- Atenció al nombre de registres. Fixa't que la #4 diu http://ddd-test.uab.cat:2000/search?cc=artpub&p=gsd --> 425 registres ; mentre que la #10 diu
http://ddd-test.uab.cat:2000/search?cc=artpub&p=gsduab --> 421 registres. Segurament té alguna explicació que se m'escapa.
- No apareix l'idioma de l'article. Es pot posar a tots "anglès" per defecte. Ho pots fer tu?
- L'etiqueta 773 (on apareix la font de l'article) no conté l'etiqueta $x amb el ISSN de la revista. És pot solucionar?
A fer a posteriori (un cop carregats)des de la biblioteca:
- haurem de revisar el nom dels autors que calguin, així com el drets de les publicacions. De cara a fer aquest revisió més fàcil, com podríem obtenir un llistat dels autors i les revistes? I, posats, a demanar, podria incloure la frquència de cada revista (vull dir, quants articles s'han publicat en cada revista)
- Com és normal, ho hi apareix l'ARE. Hi ha alguna possibilitat de creuar automàticament les dades de l'ARE amb aquest set de registres per detectar quin tenen i quins no tenen are?
TF Actualitzat per Tomas Fabregat fa aproximadament 10 anys Accions #15
Ferran,
Corregeixo la nota anterior:
- Atenció al nombre de registres. Fixa't que la #4 diu http://ddd-test.uab.cat:2000/search?cc=artpub&p=gsd --> 455 registres ; mentre que la #10 diu
http://ddd-test.uab.cat:2000/search?cc=artpub&p=gsduab --> 421 registres. Segurament té alguna explicació que se m'escapa.
FJ Actualitzat per Ferran Jorba fa aproximadament 10 anys Accions #16
D'acord, Tomàs. Et responc també a les teves observacions:
- Discrepància del número d'articles: fas bé en comentar-ho, però ara mateix em creuria més les dades més recents. Sigui com sigui, aprofitaré per confirmar que quadrin les xifres d'articles entre els que ens passen i els que carreguem.
- ISSN: acabo de comprovar que en les exportacions que ens passen només n'hi ha als articles del 2011 (13 articles) i del 2012 (4 articles). En els altres no hi apareix.
- Anglès: l'acabo d'afegir a la 041 i la 546.
Respecte a lligar-ho amb l'ARE, en el seu moment vaig muntar un sistema, descrit a la tasca #1245 (ara segurament alguna informació està desfassada), però que es basava sobretot amb l'ISSN. Fer-ho sense un identificador d'aquesta mena sempre costa més de fer-ho automàticament, i hi ha d'haver-hi més feina manual de confirmació. Ara mateix no sé què dir-te què costaria fer-ho, tot i que sempre, evidentment, cal aprofitar eines ja existents, però cal mirar-s'ho. En tot cas, l'esforç ha de ser proporcionat a la feina manual que s'estalvia, i si es pot reaprofitar per altres casos.
Em poso a fer la càrrega del 2015 al DDD públic. Actualtizaré la tasca quan hi siguin.
FJ Actualitzat per Ferran Jorba fa aproximadament 10 anys Accions #17
Ja he carregat al DDD els del 2015. He comprovat que hi fossin tots 97, i és aleshores quan me n'he adonat que clar, no tots són articles i, per tant, com que van a parar a col·leccions diferents, poden passar desapercebudes:
http://ddd.uab.cat/search?sc=1&p=gsduab
Corregiré manualment aquestes 856 perquè els fitxers siguin com han de ser, i miraré que sigui automàtic per a les properes càrregues.
FJ Actualitzat per Ferran Jorba fa aproximadament 10 anys Accions #18
Ara me n'adono que també es poden veure via la seva pròpia col·lecció:
http://ddd.uab.cat/collection/gsduab
Veus, que bé? ;-)
CA Actualitzat per Cristina Azorin fa aproximadament 10 anys Accions #19
En algun punt ens hem despistat tots plegats perquè la col·lecció hauria de ser gsd, no? i la 980 i la cerca sí, gsduab.
Tomàs, us ho podeu mirar amb l'Èlia per si cal fer algun canvi?
FJ Actualitzat per Ferran Jorba fa aproximadament 10 anys Accions #20
Cristina Azorin va escriure:
En algun punt ens hem despistat tots plegats perquè la col·lecció hauria de ser gsd, no? i la 980 i la cerca sí, gsduab.
Si finalment la col·lecció ha de ser gsd, aquest canvi no el podeu fer via web, però jo sí que el puc canviar, modificant el nom directament a la base de dades, com he fet en algun altre cop. M'ofereixo a fer-ho perquè esborrar l'actual (gsduab) per canviar-lo pel nou (gsd) implicaria tornar-hi a vincular els portalboxes, les cerques, i segur que us donaria més feina.
TF Actualitzat per Tomas Fabregat fa aproximadament 10 anys Accions #21
Ferran,
No t'havia entès. Em sembla bé el que proposes però abans parlaré amb Joan Torregrosa, perquè no se si ja ha utilitzat la URL per algun informe. No voldria que fer feina en debades.
TF Actualitzat per Tomas Fabregat fa aproximadament 10 anys Accions #22
Ferran,
D'acord amb Torregrosa, SI es pot fer el canvi d'URL per: https://ddd.uab.cat/collection/gsd
No li causarà cap perjudici perquè encara no han enviat els primers informes científics que inclourà la URL.
TF Actualitzat per Tomas Fabregat fa aproximadament 10 anys Accions #23
Ferran,
Et trasllado una petició de J. Torregrosa ja anticipada (#16) i la seva felicitació
"Hola, per cert, se m'ha oblidat dir que si tot aquest proces a mes serveix per "actualitzar" automaticament el curriculum (o una part) a eina aixo sera fantastic i molt ben rebut pels membres del meu grup.
Gracies per la feina."
Creus que via ISSN fora viable? Vull dir, si com a part de la revisió afegim manualment els ISSN, posteriorment, ens ho podem plantejar?
FJ Actualitzat per Ferran Jorba fa aproximadament 10 anys Accions #24
D'acord amb Torregrosa, SI es pot fer el canvi d'URL per: https://ddd.uab.cat/collection/gsd
Fet.
FJ Actualitzat per Ferran Jorba fa aproximadament 10 anys Accions #25
Tomas Fabregat va escriure:
Et trasllado una petició de J. Torregrosa ja anticipada (#16) i la seva felicitació
Agraït de part nostra de com de fàcil ens ho han posat amb les dades tan endreçades :-)
"Hola, per cert, se m'ha oblidat dir que si tot aquest proces a mes serveix per "actualitzar" automaticament el curriculum (o una part) a eina aixo sera fantastic i molt ben rebut pels membres del meu grup.
Gracies per la feina."
Creus que via ISSN fora viable? Vull dir, si com a part de la revisió afegim manualment els ISSN, posteriorment, ens ho podem plantejar?
Em temo que això depèn molt més de la gent d'Eina que no pas de nosaltres, perquè, fins on sé (no pas gaire), el currículum es genera a partir de les dades que figuren a Eina. L'existència de l'ISSN facilitaria (però no automatitzaria) la detecció de registres duplicats i, hipotèticament, l'exportació dels registres del DDD a Eina, però em temo que ara mateix no fan càrregues de fonts externes.
FJ Actualitzat per Ferran Jorba fa aproximadament 10 anys Accions #26
De fet, estic pensant, que per intercanviar registres, i per tant detectar l'existència o no d'un registre al DDD o a Fènix, si hi ha DOI, com és el cas del GSD, seria la via més segura.
CA Actualitzat per Cristina Azorin fa aproximadament 10 anys Accions #27
Em sembla que a Ein@ trobareu poca cosa, he agafat com a exemple el 'Bulletin des Sciences Mathematiques', he afegit els ISSN i he mirat a Ein@, ni un sol article entrat després de 2010.
També he treballat els articles de Discrete and Continuous Dynamical Systems. Series A i tampoc he tingut sort, cap a Ein@
He vist que molts dels articles tenen subvencions. Si en fer el repàs de ISSN, autors, drets, matèries en minúscula... es poguessin afegir els identificadors de projectes... (ahí lo dejo :-))
TF Actualitzat per Tomas Fabregat fa aproximadament 10 anys Accions #28
Ferran,
Em podries recordar com puc treure la llista ID Agaion-->link DDD per poder retornar-los les URL permanents?
FJ Actualitzat per Ferran Jorba fa aproximadament 10 anys Accions #29
Tomas Fabregat va escriure:
Em podries recordar com puc treure la llista ID Agaion-->link DDD per poder retornar-los les URL permanents?
http://ddd.uab.cat/search?p=gsduab&of=tm&ot=035&rg=9999
El primer camp és el número de registre del DDD (treient-hi els zeros inicials), i el darrer l'aigaionid.
FJ Actualitzat per Ferran Jorba fa aproximadament 10 anys Accions #30
- Assignat a ha canviat de Ferran Jorba a Tomas Fabregat
Tomàs,
com que el calendari ens ha enganxat a mitja migració del servidor de proves, em toca minimitzar les situacions provisionals. Per tant, he preferit fer una càrrega jo mateix de tots els documents que ens van passar, sense esperar de preparar-te un sistema perquè ho puguis fer tu.
Per tant, ara mateix he carregat la resta dels documents (anys 2011 a 2014) al DDD de proves:
http://ddd-test.uab.cat:2000/search?p=gsduab&sc=1
Hi he eliminat els que explícitament el nom de fitxer hi posava 'FALTA' (normalment són llibres), però alguns altres sembla que no queden ben lligats.
De moment t'ho passo perquè hi puguis donar un cop d'ull i, si et sembla, els anem carregant al DDD any a any.
TF Actualitzat per Tomas Fabregat fa quasi 10 anys Accions #31
Hola Ferran,
Es poden carregar tots els del 2014
TF Actualitzat per Tomas Fabregat fa quasi 10 anys Accions #32
TF Actualitzat per Tomas Fabregat fa quasi 10 anys Accions #33
- Assignat a ha canviat de Tomas Fabregat a Ferran Jorba
Hola Ferran,
Es poden carregar tota la resta d'articles:
2013 - 94
2012 - 88
2011 - 67
TF Actualitzat per Tomas Fabregat fa quasi 10 anys Accions #34
Hola Ferran,
Fa un dies havia actualitzat la tasca però no vas rebre res perquè la tenia assignada a mi mateix.
TF Actualitzat per Tomas Fabregat fa quasi 10 anys Accions #35
Hola Ferran,
De cara a la setmana vinent, tinc un trobada amb el grup GSD, creus que podria tenir el trapàs dels articles enllestit?
FJ Actualitzat per Ferran Jorba fa quasi 10 anys Accions #36
Tomas Fabregat va escriure:
De cara a la setmana vinent, tinc un trobada amb el grup GSD, creus que podria tenir el trapàs dels articles enllestit?
Tens raó, de fet ho tinc a punt. Te'ls he començat a carregar, començant pel 2011 i fins el 2014:
https://ddd.uab.cat/collection/gsd
Òbviament, només carrego aquells dels que ens han passat el text complet.
FJ Actualitzat per Ferran Jorba fa quasi 10 anys Accions #37
- Assignat a ha canviat de Ferran Jorba a Tomas Fabregat
Hola Tomàs,
ja estan tots carregats: https://ddd.uab.cat/collection/gsd.
Et retorno la tasca, i ja la tancaràs quan ho creguis convenient.
CA Actualitzat per Cristina Azorin fa quasi 10 anys Accions #38
- Data de venciment s'ha establert a 25-05-2016
- Prioritat ha canviat de Alta a Normal
CA Actualitzat per Cristina Azorin fa aproximadament 9 anys Accions #39
- Data de venciment ha canviat de 25-05-2016 a 01-06-2017
TF Actualitzat per Tomas Fabregat fa aproximadament 9 anys Accions #40
- Estat ha canviat de En curs a Tancada
CA Actualitzat per Cristina Azorin fa aproximadament 9 anys Accions #41
- Paraula clau ha canviat de gsd JR a gsd
FJ Actualitzat per Ferran Jorba fa aproximadament 9 anys Accions #42
- S'ha afegit relacionat amb Tasca #4360: Càrrrega al DDD de registres del grup de recerca GSD: 2a remesa (2016)