Muscat i Blacklight

Vaig estar demanant via Telegram a la gent de Softcatalà sobre el seu sistema de traducció automàtica, perquè sóc membre del grup de col·laboradors. Això és el que vaig aprendre:

Bona tarda. Voldria mirar-me l'api per provar el vostre traductor per fer un primer esbós de traducció d'una aplicació lliure ja multilingüe. Disposo dels textos en anglès, francès, alemany, castellà, italià, polonès i portuguès. Tinc experiència de traduir programari i puc programar en Python o Ruby, i el Perl que encara recordo, si cal. Vull dir, que de context ja en tinc. Però el que no trobo és com utilitzar la vostra api per anar-hi enviant textos (frases, paràgrafs, etc) i valorar si ens convé el resultat abans de decidir-nos. Teniu exemples? Moltes gràcies.

Hola, Ferran
No oferim el servei de traducció via API, però tens diferents opcions:
A la pàgina del Traductor (https://www.softcatala.org/traductor/), pots enviar-hi un fitxer en format .po per a traduir-lo automàticament i després fer-ne la revisió/post-edició
Softcatalà
Traductor
Traductor automàtic català-castellà basat en la tecnologia Apertium. També ofereix traducció a l'anglès, francès, portuguès, occità (aranès) i aragonès.
Una altra opció és muntar-te el motor de traducció en local i fer crides via API
El motor de traducció potser Apertium o neuronal. El segon el tens disponible aquí https://github.com/Softcatala/nmt-softcatala
GitHub
GitHub - Softcatala/nmt-softcatala: This repository contains Neural Machine Tran...
This repository contains Neural Machine Translation tools and models built at Softcatalà - GitHub - Softcatala/nmt-softcatala: This repository contai...

Gràcies, Joan. De moment crec que m'interessaria començar per aquí. Però no veig com puc "enviar-hi un fitxer" en format .po. He de fer un post? Amb quins paràmetres? Teniu algun exemple que em pugui mirar, si us plau?

És a la part inferior del web https://www.softcatala.org/traductor/

Ah! Fins que no he triat "anglès" al desplegable de dalt no s'ha obert aquest quadre de diàleg de baix! Ostres, que no ho veia, gràcies. Tot i que jo havia treballat amb fitxers .po i per tant hi tinc certa familiaritat, aquesta aplicació és Ruby on Rails i no utilitza .po. Trigaré una mica en saber com ho converteixo, i si hi ha eines ja disponibles. Valorarem això i les altres opcions. Molt agraït.

Un cop tingueu l'aplicació traduïda al català, en ser lliure, es pot afegir a la memòria de traduccions https://www.softcatala.org/recursos/memories/. Això permet millorar el traductor i també genera un informe de qualitat de forma automàtica que facilita la detecció i correcció d'errors en la traducció
Softcatalà
Memòries de traducció
Escriviu el text que voleu cercar a les memòries de traducció i premeu el botó de cerca

Sí, les memòries me les havia mirat fa uns 15 anys i les vaig utilitzar per les frases ja estandaritzades per a la majoria de les aplicacions (identificació, confirmacions vàries, etc.). Però tenia cert interès de veure si anar directament al traductor per a tots els textos valia la pena o era millor mirar si la frase ja existia a la memòria i recórrer al traductor només en aquelles que no hi són.

La meva impressió és que es pot traduir molt de Muscat al català via traduccions automàtiques. Hi ha una part de missatges informàtics molt estandaritzats (com d'identificació o confirmació) que es poden trobar a les memòries de traducció de Softcatalà. Molts altres (com les equivalències entre els codis d'idioma i la llengua, o a terme de relació, com els $e de les etiquetes d'autor) es poden treure de la traducció catalana del Marc21. I la resta sigui via api o via el sistema de Softcatalà. D'apis n'ho ha unes quantes: les d'Apertium, Google, Yandex o Microsoft.

D'altra banda, ens hem de posar en contacte amb el RISM perquè "obrin" la traducció al català i ens diguin com ho volen fer. Ja ho tenen per la mà, perquè hi van afegint idiomes: darrerament el portuguès i el polonès.

Per tant, jo crec que és una feina que es pot encarregar a una persona o empresa amb perfil informàtic i amb amor a la llengua catalana, que en pugui valorar els resultats i canviar l'estratègia si cal. I finalment, com a Servei de Biblioteques també caldrà fer-na una revisió, o l'anirem fent a mesura que hi veiem coses que calgui millorar.

Pel què fa https://crowdin.com/, a la plataforma de traducció de Muscat, només puc dir que és fantàstica, tot i que hi ha coses que encara no conec ni entenc. Es fa tot via web, i el funcionament és molt intuïtiu. Si alguna expressió ja existeix traduïda en català (potser per un altre projecte que l'utilitza, com Decidim, https://crowdin.com/project/decidim), ja ho suggereix. I també permet veure les traduccions en altres llengües (les castellanes, franceses, italianes sempre són útils, i sovint la millor construcció ve de llocs diferents). Va avisant de textos nous que cal traduir o revisar, etc.

Sigui com sigui, ara mateix jo hi tinc un compte creat, amb el que em van donar permisos a https://rism.crowdin.com/, on hi tenen les traduccions, i hi he fet una part de la feina mentre anava familiaritzar-me amb la plataforma. Com vaig fer amb Invenio, he seguit la guia d'estil de Softcatalà, que està molt bé i permet que sigui coherent amb les altres traduccions catalanes de programari: https://www.softcatala.org/guia-estil-de-softcatala/

Amb tot, hi ha algunes coses que desconec:

En primer lloc, sembla que a Crowdin (o tal com ho té configurat el RISM) les traduccions s'han de validar. Ja em sembla bé, però això implica que al menys hi hem de ser dues persones.

En segon lloc, pel què fa a Muscat, hi ha dos tipus de textos a traduir: d'una banda, els missatges o textos (curts) de l'aplicació, que veig clarament que es gestionen a Crowdin, i l'altre, les pautes de catalogació del RISM, que són textos molt més llargs (https://github.com/rism-digital/muscat-guidelines), i que sembla que també, però que jo crec que no me'ls he trobat. Clarament d'aquesta segona part seria millor que se n'encarregués algú que treballa amb el Muscat seguint aquestes guies, com les bibliotecàries de la BNC o l'Esmuc.

He provat d'activar-la a https://traces-muscat.uab.cat i em sembla molt que la traducció és incompleta. Vull dir, he traduït tot el que em van preparar, però amb això no n'hi ha prou perquè es vegi bé en català, surten molts missatges de translation missing.

Ja ho preguntaré.

Vaig escriure als responsables del Muscat i em van avisar que els textos que faltaven estan a Github. Els he estat traduint els darrers dies i avui l'he pujat a Github: https://github.com/rism-digital/muscat/pull/1339

De moment l'he activat als nostres Muscats locals abans que estigui formalment integrat en el programari.

He volgut que de la BNC i l'ESMUC també en tinguessin coneixement de primera mà, i per tant avui els he enviat aquest correu.

De: Ferran Jorba <Ferran.Jorba@uab.cat>
Date: dijous, 16 de març de 2023 10:12
A: Rosa Montalt <rmontalt@bnc.cat>; Montserrat Urpí <murpi@esmuc.cat>; Antonio Ezquerro <ezquerro@imf.csic.es>
CC: cristina Azorin Millaruelo <Cristina.Azorin@uab.cat>; Raul Core Bradineras <Raul.Core@uab.cat>; Anna Maria Florensa Farré <Anna.Florensa.Farre@uab.cat>
Assumpte: Muscat traduit al català

Bon dia,

segurament no ens coneixem tots, però formem part, amb major o menor mesura, de la comunitat catalana del Muscat.

A la UAB tenim tres repositoris digitals: l'institucional (https://ddd.uab.cat), un de llengua i literatura catalanes (https://traces.uab.cat) i un inventari de fons musicals (https://ifmuc.uab.cat), els dos darrers impulsats les departaments de la UAB corresponents. Els teníem (i, de fet, encara els tenim) amb Invenio (https://inveniosoftware.org/), un programari del CERN que va començar utilitzant Marc21, i és aquest un motiu pel qual el vam triar fa més de 15 anys. Quan fa poc van decidir deixar de costat el Marc21, a la UAB vam començar a buscar un substitut, i el que més ens va convèncer va ser Muscat, tot i que per al DDD i Traces necessitarà una adaptació més o menys profunda.

Sigui com sigui, el que també preteníem és que estigués traduït al català. Ens vam posar d'acord amb la Jennifer Ward i l'Antonio Ezquerro per avisar-nos i coordinar-nos i no duplicar feina i tenir-nos al dia. La setmana passada vaig acabar les traduccions dels textos que estan a Crowdin (https://rism.crowdin.com/), que corresponen, crec, al menú de dalt a l'esquerra de Muscat (MARC Configuration, a /admin/doc), i avui he pujat a Github els de l'aplicació pròpiament dita (https://github.com/rism-digital/muscat/pull/1339).

Sabent que tant a la BNC com a l'ESMUC hi treballeu, i d'acord com sempre amb l'Antonio Ezquerro, a qui agraeixo la seva excel·lent predisposició, us volia fer partíceps que aviat us el trobareu en català. Per part de la "part informàtica" de RISM-digital ja n'estan assabentats i també ens ho ha posat fàcil, per tant entenc que no hauria de trigar gaire, sobretot sabent que l'aplicació l'actualitzen sovint.

Pel què fa a l'estil i les qüestions lingüístiques he utilitzat el llibre d'estil de Softcatalà (https://www.softcatala.org/guia-estil-de-softcatala/), i les seves eines, com diccionaris, i memòries de traducció, i pel què fa a la terminologia específicament bibliotecària o Marc21, si el terme o l'expressió ja existeix en la traducció catalana de la BNC, l'he utilitzada (https://www.bnc.cat/sprof/normalitzacio/marc21bf/bfindex.html), a no ser que se m'hagi passat per alt, cosa perfectament possible. Per a la terminologia musical he consultat sovint el nostre especialista en música a la Biblioteca d'Humanitats de la UAB, en Raúl Coré, que és també l'administrador de l'IFMuC.

He consultat sempre les traduccions castellana (gràcies un cop més, Antonio), francesa, italiana i esporàdicament la portuguesa buscant diferents models, o inspiració si l'expressió no em semblava natural en català. Segur, però, que hi ha errors (traduttore tradittore) i expressions que es podrien redactar millor. Per tant, em poso a la vostra disposició i si teniu observacions i correccions, me les podeu adreçar i les valorarem amb molt de gust.

Ben cordialment,

Ferran Jorba

--
Ferran Jorba
Administrador del ddd.uab.cat
Servei d'Informàtica
Universitat Autònoma de Barcelona
Ferran.Jorba@uab.cat