Home-Directories auf den Number Crunchern

[Daniel Baumann]

Hallo zusammen

Leider muessen wir auf unseren Linux Number Crunchern die 
Home-Directories voruebergehend trennen:

   * wegen einigen wenigen Usern die weiterhin gleichzeitige, gecachte
     Schreibzugriffe auf die gleichen Objekte parallel von mehreren
     unterschiedlichen Systemen aus gemacht haben, sind ein paar wenige
     einzelne Metadaten inkonsistent (d.h. die Daten auf den Disks passen
     nicht zu den Metadaten oder umgekehrt).

     Wenn eine Inkonsistenz schreibend getroffen wird, stell Ceph zur
     Sicherstellung der Datenintegritaets das Dateisystem ab und wir
     muessen alle Dienste neu starten.

     Davon sind ausschliesslich die Home-Directories auf den Number
     Crunchern betroffen, nicht aber die Shares (z.B. P:\LFE).

   * Wir koennen wegen fast vollem Ceph[0] die Home-Directories nicht
     sinvoll umkopieren (und somit die Inkonsistenz "sinnvoll" beheben;
     einzige andere Variante waeren der, aufgrund der Groesse, mehrere
     Tage/Wochen dauernde offline Check des ganzen Dateisystems, was
     nicht akzeptabel ist).

     D.h. wir werden die Container auf den Number Crunchern
     jetzt mit "leeren" Homes starten, somit werden alle neu angelegten
     Daten auf den lokalen SSDs abgelegt.

     Dort gibts es nur beschraenkt Platz (1TB), das sich alle Nutzer
     gemeinsam teilen muessen, dafuer ist der Betrieb stabil und
     sichergestellt (sofern niemand die SSDs abfuellt).


Die Container ab heute Nachmittag wieder online und es kann, mit kleinen 
Datensaetzen, weiter gerechnet werden.

Die "alten" Home-Directories sind read-only via P:\LFE\Users resp. 
smb://smb.ceph.bfh.ch/Users zugaenglich.


...und nun noch die gute Nachricht zum Schluss: gestern wurden die neuen 
Ceph Server fuer die Kapazitaetserweiterung ins Rechenzentrum geliefert, 
wir arbeiten weiterhin mit Volldampf an den noetigen Umbau/Ausbau 
Arbeiten und um die Migration abschliessen zu koennen.

Gruesse,
Daniel

[0] 
https://lists.bfh.science/old/bfh-linux-announce/2018-October/000103.html
 
https://lists.bfh.science/old/bfh-linux-announce/2018-October/000104.html

-- 
Berner Fachhochschule / Bern University of Applied Sciences
Services / IT-Services
Daniel Baumann
Teamleiter Linux Services
___________________________________________________________
Dammweg 3, CH-3013 Bern
Telefon direkt +41 31 848 48 22
Telefon Servicedesk +41 31 848 48 48
daniel.baumann at bfh.ch
https://bfh.ch
https://bfh.science