Hintergrund: Cisco Nexus 5000 Upgrade fehltgeschlagen

[Daniel Baumann]

Hallo zusammen

Kurzfassung: das naechtliche NetApp offsite-Backup ist seit heute 10:50
Uhr wieder sichergestellt.

On 12/15/20 8:06 AM, Daniel Baumann wrote:
>   * Das Kopieren von NetApp Snapshots zwecks offsite-Backup von
>     Bern nach Biel hat nicht funktioniert resp. wurde unterbrochen.
> 
>     Wir haben Layer 1 geprueft, ist alles korrekt verkabelt und
>     alle Interfaces auf den noch funktionierenden Nexus sind aktiv.

Hintergrund fuer die technisch Interessierten:

  * wir haben heute morgen im RZ in Bern zwischen 09:15 und 11:00
    nochmal die NetApp Verkabelung reverse-engineered und durchgeprueft.

  * Dabei haben wir festgestellt, dass 4 von 5 Farben auf dem
    Glasfaser-CWDM korrekt auf den Core Routern angeschlossen sind, aber
    eine Farbe direkt und einzig auf den kaputten Nexus Switch geht
    (also nicht redundant angeschlossen ist).

  * Die 1510nm Farbe wird fuer VLAN 1040 benutzt, ueber welches jede
    Nacht das offsite-Backup des NetApps Bern->Biel uebertragen wird.

  * D.h. die NetApp Interfaces waren alle redundant und up,
    aber der Uplink nach Biel halt nicht. Deshalb hat es fuer uns zuerst
    so ausgesehen wie wenns ein Software-Bug mit dem Failover waere.

  * Wie schon im letzten Mail angetoent, werden wir im Zusammenhang mit
    dem Life Cycle des Netzwerk Cores in Biel im Q2/2021 die Verbindung
    Bern-Biel vergroessern - nicht nur aus Performance sonder auch aus
    Redundanzgruenden.

    Dies haben wir bei der Analyse des Ist-Netzes im Verlauf des Herbst
    bemerkt und bereits Anfang Dezember die notwendigen Schritte dazu
    eingeleitet.

Gruesse,
Daniel

-- 
Berner Fachhochschule / Bern University of Applied Sciences
Services / IT-Services
Daniel Baumann
Teamleiter Linux & Infrastructure Services
___________________________________________________________
Dammweg 3, CH-3013 Bern
Telefon direkt +41 31 848 48 22
Telefon Servicedesk +41 31 848 48 48
daniel.baumann at bfh.ch
https://bfh.ch
https://bfh.science