Projecte

General

Perfil

Accions
Historial

Hardware DDD

El sistema DDD consisteix en un parell de servidors genèrics i un parell d'armaris de disc.

Servidors

Mompou i Taltabull (2016- )

  • HP Proliant DL380 G9 (http://www8.hp.com/us/en/products/proliant-servers/product-detail.html?oid=7271241). La configuració de cadascun dels dos servidors consisteix en
  • 2 CPU Intel Xeon E5-2650 v3 a 2,30 GHz (2 sockets, 20 cores, 40 threads)
  • 32 GB RAM
  • 2 discs de 300 GB (partició arrel i /var) i 2 discs de 900 GB (/home) en formacions RAID1 de dos (s'aprofita el 50% de l'espai total)
  • 2 ports Ethernet 10 Gbit/s i 4 ports Ethernet 1 Gbit/s
  • Imatges:

Data de compra: 2015

Homs i Nuix (2008-2015)

Data de compra: 2008

Toldrà i Morera (2004-2008)

Descripció:

Data de compra: 2004

Armaris de disc

Isilon (2022-)

És un armari de disc accessible des de Taltabull via NFS, i per tant relativament lent. L'utilitzem com a segona còpia del Volum-I des del 2022, substituint els Satabeasts, que fa molts anys que no estan en manteniment. Internament l'anomenem Volum-5b.

Unity-500 (2019-)

El substitut dels VNX s'ha instal·lat al llarg del 2019. Consisteix en una cabina híbrida amb armaris de disc dos tipus, la de discs ràpids flash i més cara (Unity-500F) i l'altra de discs mecànics més lenta (Unity-500).

Les especificacions són aquestes: https://shop.dellemc.com/es-es/Product-Family/Unity-Products/Dell-EMC-Unity-500-Hybrid-Flash-Storage/p/EMC-Unity-500-Hybrid-Storage

Pel que fa al nostre cas, primer hem migrat els discs del Volum-I als discs mecànics, l'agost i setembre del 2019 (internament anomenat VOLUM-5), i els documents publicats al DDD (alias Clariion) aniran als discs flash la primera setmana de novembre.

VNX 5800 (alias "Clariion") (-2019)

Màquinari per a l'emmagatzematge dels fitxers de consulta

Es tracta d'una cabina de discs marca EMC model VNX 5800, amb capacitat de servir disc a nivell de bloc (amb els protocols FC i iSCSI) i de fitxer (NFS i CIFS). Per la part de bloc, disposa de dues controladores, i per la part de fitxer, dues controladores més (anomenades "control stations") i tres "capçals" servidors (anomenats "data movers"), tots treballant en alta disponibilitat.

A nivell de discs, disposa de 52 discs SSD de 400 GB, 227 discs SAS de 600 GB i 33 discs SAS de 2 TB.

A nivell de connectivitat, per la part de bloc té: 24 ports FC de 8 Gbps, 4 ports Ethernet de 10 Gbps; i per la part de fitxer: 18 ports Ethernet de 10 Gbps.

La funcionalitat que s'utilitza a Homs/Nuix/Mompou/Taltabull és la de NAS: es serveix des del VNX 5800 un sistema de fitxers compartit per NFS per una interfície de xarxa de 20 Gbps (agregació de dos ports de 10 Gbps). Aquest sistema de fitxers està allotjat a un pool de 37 discs SAS de 600 GB.

A l'abril del 2016 disposem de 740 GB i n'ocupem 628 GB, un 86%.

A desembre 2018 la previsió es canviar tot aquest armari de disc al 2019.

Volum-4 (VNX 5800 + VNX 5300, màsters de digitalització) (2018-)

A finals del 2018 (tasca #4604) vam completar la migració de la còpia primària a discs del 5800, i el 5300 va passar a ser la còpia secundària. Des del punt de vista de la infraestructura, el material del Liceu i del DDD ocupen discs de les mateixes cabines.

L'adreça de visualtizació web no canvia, continua essent http://volum-i.uab.cat

Els Satabeasts continuen connectats per a usos més auxiliars, com l'espai amb la còpia en jpg (tasca #4843) dels tiffs.

Volum-2 (VNX 5300, fons del DDD) (2015- )

VNX millora la disponibilitat de les aplicacions i la protecció de dades per a aplicacions basades en arxius i blocs. Simplifica la transferència del sistema d'arxius en línia entre sistemes de balanceig de càrrega, disponibilitat millorada i migracions. L'equip és un model VNX 5300 de l'empresa EMC (http://www.emc.com/collateral/software/specification-sheet/h8514-vnx-series-ss.pdf).

A partir del 2015 el substitut d'un dels dos SataBeast és el que coneixem com a VNX. Les diferències principals són:

  1. Ja no es tracta d'un hardware específic per al DDD, sinó d'uns discs que formen part d'una infrastructura comuna per la UAB.
  2. El VNX no incorpora funcionalitats que ens havíen anat molt bé en el SataBeast, com era que els discs es paraven automàticament quan no s'usaven, amb l'estalvi energètic i d'avaries que implicava.
  3. No podem fer agrupacions de discs per fer-ne RAIDs, com fèiem amb el SataBeast, sinó que de és una única agrupació (RAID) de discs
  4. Té doble controladora i 20 discs de 3 TB instal·lats (60 TB bruts en una configuració d'una única formació RAID 6, que són aprox. 54 TB nets).
  5. Guanya capacitat d'emmagatzematge, va amb calaixos (de 15 discos) que es poden ampliar fàcilment.
  6. Més amplada de banda, d'un port hem passat a quatre; actualment fem servir dues.
  7. Té un filesystem propi que permetria en el futur més flexibilitat del maquinari.

Espai útil per al DDD a l'any 2015: 23 TB (11 discs de 2 TB i un de 1 TB). El contracte de manteniment finalitza el 31 de desembre de 2016 amb 24x7, i es renova anualment.

El Satabeast antigament conegut com a Volum-I s'utilitza com a segona còpia del Volum-2 i ara l'anomenem Volum-2b.

Data de compra: 2013

Volum-3 (VNX 5300, fons de la Societat del Gran Teatre del Liceu) (2016- )

Degut al seu volum previst de força TB, i també perquè poden disposar de finançament específic, s'ha comprat un calaix de discs per a la cabina de discs EMC VNX5300 ja instal·lada, dedicat per als màsters TIFF en alta resolució de la digitalització del fons del Liceu.

Es tracta d'un calaix amb capacitat per a 15 discs. Amb el pressupost inicial, l'any 2014 es va poder comprar, a part del calaix, 2 discs de 3 TB. El novembre del 2015 han arribat 2 discs més de 3 TB.

D'aquest total de 4 discs, de moment els configurarem com a 3+1 (Raid 5), de manera que quedaran 9 TB útils. Així els podrem aprofitar, tot i que, tal com funciona el Raid, per afegir-hi més discs, haurem de desmuntar-los i tornar-los a crear, i mentre duri l'operació haurem de confiar amb la segona còpia.

La configuració final recomanada és crear una formació RAID 6 amb 14 discs i 1 disc més per a hot spare. Això fa un total de 15 discs (a instal·lar en el calaix adquirit). Aquesta configuració dóna una capacitat neta d'aproximadament 32,4 TB (dels 15 discs només s'aprofiten 12, cada un amb una capacitat d'aproximadament 2,7 TB: 12 x 2,7 = 32,4 TB).

  • A novembre del 2015 el fons digitalitzat del Liceu ocupa 2,1 TB, i encara s'allotjava al Satabeast conegut antigament com a Volum-I.
  • A octubre de 2016 el fons digitalitzat del Liceu ocupa 2,6 TB al Volum 3 (VNX). Queden 5,6 TB útils disponibles.
  • El segon Satabeast (antigament conegut com a Volum-Ib) fa de segona còpia del fons del Liceu (Volum 3), ara l'anomenem Volum-3b.

Data de compra: 2014

Volum-2b i Volum-3b (2008-2022)

A part dels fitxers (majoritàriament PDFs i JPGs) de consulta que se serveixen via DDD i que s'allotgen als servidors descrits anteriorment, el Servei de Biblioteques disposa d'uns armaris de discs per a emmagatzemar altres fitxers, majoritàriament els màsters TIFF en alta resolució dels programes de digitalització retrospectiva.

Entre 2009 i 2015, les dues còpies han estat allotjades en dos armaris SataBeast, idèntics, i que han tingut un cert creixement.

Degut al seu volum (uns 25 TB l'any 2015), i perquè majoritàriament són fitxers estàtics, és a dir, que després de desar-se ja no es modifiquen, i el seu nivell de consulta és baix, no segueixen els sistemes genèrics de la UAB per a fer backups. Es van mantenir dues còpies dels fitxers, en dos armaris diferents, per què si hi havia cap problema, ja fos de hardware, software o humà, es minimitzés el risc de pèrdua.

L'1 de gener de 2013 van quedar fora de manteniment. El 2015 un dels dos SataBeasts es substituït pel Volum 2 (VNX) i passa a fer funcions de còpia de seguretat d'aquest mateix Volum 2. L'altre SataBeast actua com a còpia de seguretat del Volum 3, els materials de la Societat del Gran Teatre del Liceu.

Data de compra: 2008

Actualitzat per Ferran Jorba fa més de 3 anys · 48 revisions