- Backup-info - lists.rwth-aachen.de

Status-Update Backup-Umstellung RWTH
by Filla, Nicole 16 Dec '22

16 Dec '22

Liebe Backup-Admins, hiermit möchten wir Sie wieder über die aktuellen Entwicklungen im Kontext der Backup-Umstellung informieren. Wir berichten über die Ereignisse sowie über Entwicklungen, die unter anderem aus Ihrem Feedback (Tickets, Community-Liste, Backup-Sprechtag u.ä.) umgesetzt werden konnten. Der Betrieb für den Service Backup und Restore wurde in den vergangenen Wochen mitunter durch abteilungsinterne Vertretungen gewährleistet. Bis auf eine kurze Störung des Command Centers am 07.12.2022 (https://maintenance.itc.rwth-aachen.de/ticket/status/messages/16-backup-und…) lief das Commvault-Backup-System störungsfrei. Das Team Backup ist zum aktuellen Zeitpunkt noch nicht wieder ganz vollständig. Positives Feedback: Besonders hervorzuheben sind die positiven Rückmeldungen, die uns vermehrt erreichen. Mitunter zu stabilen, fortwährenden und zuverlässigen Sicherungen, haben wir auch Feedback zum Restore unter Commvault erhalten. Nach einer Ransomware-Attacke auf eines der RWTH-Institute, bei der viele Dateien auf einem Fileserver verschlüsselt wurden, war nach der erfolgreichen Beseitigung der Schadsoftware ein umfangreicher Restore der beschädigten Dateien notwendig. Hierzu teilten uns die betroffenen Admins mit, dass die Wiederherstellung schnell und zuverlässig mit dem neuen System funktioniert hat. Auch aus den nun überwiegend bearbeiteten Supportanfragen haben wir zahlreiche positive Rückmeldungen erhalten. Viele Supportanfragen konnten mit dem Vermerk, dass Probleme nun behoben sind, erfolgreich geschlossen werden. Debugging des Command Centers: Neben der Suche und der Filterfunktion im Command Center sind einige wenige Bugs identifiziert worden, die aus Sicht der User Experience noch nicht vollends zufriedenstellend sind. Gemeinsam mit Commvault wird an der Problematik gearbeitet. Grund dafür sind Fehler in der zugrundeliegenden Mongo-DB. Diese Fehler werden baldmöglichst behoben. Client Installation/ Registrierung: FQDN_1 Bei der Installation von Clients, die einen deckungsgleichen FQDN mitbringen, wurde zwischenzeitlich ein Workflow implementiert, der die Clientnamen mit einem Suffix in der Form _1 bzw. _<laufende Nummer> versieht. Dabei handelt es sich um eine Maßnahme, um das Überschreiben von Clients zu verhindern sowie die Installation gleichnamiger Clients zu ermöglichen. Bitte beachten Sie, dass es sich dabei um eine Interimslösung handelt. Die Registrierung dieser ergänzten Clientnamen ist aktuell über den Workflow „Assign Client to Group“ und „Bulk Registration“ nicht möglich. Die Anpassungen diesbezüglich erfolgen kommende Woche. Im Bedarfsfall wenden Sie sich bitte an das Team Backup-Umstellung. Synthetic Full: Hängende Jobs Wir haben einige Anfragen bzgl. noch hängender Jobs erhalten, die als „Synthetic Full“ gekennzeichnet sind. Diese Jobs werden IT Center-seitig in der kommenden Woche abgebrochen und als „Full Backup“ mit entsprechendem Serverplan neu angestoßen. Backup/Restore für Managed Services Clients: Aktuell werden Backup und Restore für Clients aus dem Managed Service durch das IT Center betreut. Wir haben dazu die FAQ um einen entsprechenden Beitrag ergänzt (https://help.itc.rwth-aachen.de/service/t4ctl3msqrmt/71d0edffd40c4627b0c376…). Im Bedarfsfall eröffnen Sie bitte eine Serviceanfrage über das IT-ServiceDesk. Die Managed-Services-Kolleg*innen helfen hier weiter. Aktuell laufen die organisatorischen und technischen Abstimmungen, um Backup und Restore wieder in die Verantwortung der Service-Nutzenden für die Clients zu übergeben. Unterstützungsangebot: Backup-Sprechtag Die sciebo-Störung, die das Editieren unserer Sprechtag-Planung verhindert hat, konnte behoben werden. Sie können sich nun wieder für Termine eintragen (https://help.itc.rwth-aachen.de/service/t4ctl3msqrmt/article/35c34521d09747…). Bitte beachten Sie, dass dieses Unterstützungsangebot noch kommende Woche besteht. Auch im Folgejahr werden wir Sie selbstverständlich professionell unterstützen. Über Entwicklungen berichten wir u.a. über die Backup-Info-Liste. E-Mail-Benachrichtigungen/ Define Alerts: Die fehlende Berechtigung zum Konfigurieren von E-Mail-Benachrichtigungen ist gesetzt worden. Sie haben nun die Möglichkeit im Bereich „Monitoring“ entsprechende E-Mail-Benachrichtigungen einzustellen. Lassen Sie sich darüber bspw. über fehlgeschlagene Backup-Jobs per Mail benachrichtigen. Bitte beachten Sie nur nach Rücksprache mit Empfangenden weitere, nicht eigene E-Mail-Adressen zu hinterlegen. Die detaillierte Anleitung dazu folgt im Laufe der nächsten Woche auf IT Center Help. Hardware-Erweiterung: Die Hardware-Infrastruktur des neuen Backup-Systems ist redundant an insgesamt sechs RWTH-Standorten aufgebaut. Im Laufe dieser Woche (12.12-16.12.) wurde mit weiterem Speicher und entsprechenden Hardware-Komponenten die Erweiterung begonnen. In dieser Phase erfolgten Lieferungen und Racking. Ab Januar werden die Implementierungsarbeiten fortgesetzt. Wir bedanken uns bei allen Beteiligten, vor allem an den nicht zum IT Center gehörenden Standorten, für die Unterstützung! Anbindung der dienstnehmenden Unis Paderborn und Wuppertal: In dieser Woche haben wir erfolgreich die Universität Paderborn sowie die Bergische Universität Wuppertal an das RWTH-Backup-System angebunden. Die beiden Hochschulen werden künftig als sog. Dienstnehmer-Hochschulen den Service Datensicherung.nrw (https://datensicherung.dh.nrw/de/) in Anspruch nehmen. Das Onboarding startet ab kommenden Montag, 19.12.2022. Weitere Feature-Releases: Seit dem Ende dieser Woche laufen die Vorbereitungen auf die neulich angekündigten Feature-Releases. Wir evaluieren aktuell die entsprechenden Konfigurationsaufwände sowie Road Maps für das Ausrollen. Wir bemühen uns darum, Ihnen baldmöglichst Auskunft über das erweiterte Produktportfolio für den Service Auskunft zu geben. Vielen Dank für diese erfolgreichen zwei Wochen sowie Ihr Feedback - ganz gleich, auf welchem Weg. Wir freuen uns über das entgegengebrachte Vertrauen und auf die kommenden Wochen. Allen ein schönes und erholsames Wochenende sowie viele Grüße Nicole Filla für das Team Backup-Umstellung an der RWTH -- Nicole Filla, B.A. IT Center Gruppe: Server, Storage, HPC Abteilung: Systeme & Betrieb RWTH Aachen University Seffenter Weg 23 52074 Aachen (Germany) Tel.: + 49 241 80-77129 filla(a)itc.rwth-aachen.de www.itc.rwth-aachen.de Social Media Kanäle des IT Centers: https://blog.rwth-aachen.de/itc/ https://www.facebook.com/itcenterrwth https://www.linkedin.com/company/itcenterrwth https://twitter.com/ITCenterRWTH https://www.youtube.com/channel/UCKKDJJukeRwO0LP-ac8x8rQ

1 0

sciebo-Störung: Backup-Sprechtag Plan betroffen
by Filla, Nicole 14 Dec '22

14 Dec '22

Hallo zusammen, aktuell liegt eine (Teil-)Störung sciebo betreffend vor: https://maintenance.itc.rwth-aachen.de/ticket/status/messages/39-sciebo Im Kontext Backup bzw. Datensicherung.nrw betrifft dies den Backup-Sprechtag-Plan. Dieser kann aktuell nicht editiert werden. An der Behebung wird gearbeitet. Anbei der aktuelle Stand der Planung als Excel-Datei u.a zwecks Zugangsdaten für den morgigen Sprechtag. Für diesen, am Donnerstag, 15.12.2022, sind bereits alle Termine gebucht. Buchungen und Bearbeitungen für Folgetermine bitte ich aktuell noch zurückzuhalten. Sollte die Störung nicht zeitnah behoben werden können, finden wir einen Weg. Die besten Grüße mit der Bitte um ein wenig Geduld Nicole Filla -- Nicole Filla, B.A. IT Center Gruppe: Server, Storage, HPC Abteilung: Systeme & Betrieb RWTH Aachen University Seffenter Weg 23 52074 Aachen (Germany) Tel.: + 49 241 80-77129 filla(a)itc.rwth-aachen.de www.itc.rwth-aachen.de Social Media Kanäle des IT Centers: https://blog.rwth-aachen.de/itc/ https://www.facebook.com/itcenterrwth https://www.linkedin.com/company/itcenterrwth https://twitter.com/ITCenterRWTH https://www.youtube.com/channel/UCKKDJJukeRwO0LP-ac8x8rQ

1 0

Login Commvault (console1) kurzzeitig gestört
by Filla, Nicole 07 Dec '22

07 Dec '22

Liebe Backup-Admins, der Login auf Commvault über https://console1.dasi.rwth-aachen.de/ war kurzfristig (ca. gegen 17:00 Uhr) gestört. Die Störung konnte bereits behoben werden. Falls Sie in der Zwischenzeit Schwierigkeiten hatten beim Login, probieren Sie es bitte erneut. Die besten Grüße Nicole Filla -- Nicole Filla, B.A. IT Center Gruppe: Server, Storage, HPC Abteilung: Systeme & Betrieb RWTH Aachen University Seffenter Weg 23 52074 Aachen (Germany) Tel.: + 49 241 80-77129 filla(a)itc.rwth-aachen.de www.itc.rwth-aachen.de Social Media Kanäle des IT Centers: https://blog.rwth-aachen.de/itc/ https://www.facebook.com/itcenterrwth https://www.linkedin.com/company/itcenterrwth https://twitter.com/ITCenterRWTH https://www.youtube.com/channel/UCKKDJJukeRwO0LP-ac8x8rQ

1 0

Status-Update Backup-Umstellung und gesammelte Feature-Wünsche
by Filla, Nicole 02 Dec '22

02 Dec '22

Hallo liebe Backup-Admins, wir möchten Sie an dieser Stelle über die aktuellen Entwicklungen im Rahmen der Backup-Umstellung informieren. Zum einen berichten wir über die Ereignisse in dieser Woche und zum anderen über die Features, die wir bisher ausgerollt haben und jene, die grundsätzlich zur Verfügung stehen. Diese Woche stand im Zeichen der Aufarbeitung des Nutzendensupports: Aufgrund der aktuell sehr eingeschränkten personellen Besetzung wurde der Betrieb abteilungsintern durch Vertretungen aufrechterhalten. Positiv ist dabei zu bemerken, dass beide Backup-Systeme ohne besondere Vorkommnisse genutzt werden konnten. Wir haben intensiv an der Bearbeitung noch ausstehender Supportanfragen gearbeitet und bereits ein Drittel der noch zu prüfenden Anfragen bearbeiten können. Im Rahmen des ausgedehnten Unterstützungsangebotes durch das Commvault-Consulting haben wir diese Woche die Backup Sprechtage ausgiebig genutzt und konnten in vielen Fällen erfolgreich bei der Lösung von Fragen unterstützen. Wir werden die Dynamik und Bemühungen auch in den kommenden Wochen beibehalten, um Ihre Anfragen zu bearbeiten und den Unterstützungsbedarf zu decken. Darüber hinaus haben wir aktiv im Kontext Datensicherung.nrw unterstützt: Die TU Dortmund, die indirekt von dem Cyber-Angriff auf die Universität Duisburg-Essen betroffen war, konnte erfolgreich im Bereich der Datensicherung unterstützt werden, um einen Schutz der wichtigsten Systeme weiterhin zu gewährleisten. Darüber hinaus wurde und wird stetig am Ausbau der Nutzendendokumentation gearbeitet. Aus den zu bearbeitenden Anfragen ist Ihr Wunsch nach weiteren Sicherungsmöglichkeiten für unterschiedliche Systeme deutlich hervorgegangen. Wie angekündigt, können Sie der nachfolgenden Auflistung den aktuellen Stand der bisher ausgerollten Features entnehmen. Zukünftig erweitern wir das Portfolio um weitere Sicherungsmöglichkeiten. Wir bitten um Ihr Verständnis, dass wir zum aktuellen Zeitpunkt keine Angaben zu Veröffentlichungsdaten machen können. Wir werden Sie jedoch über die Mailingliste Backup-Info über die entsprechenden Roll-Outs informieren. Aktuell ausgerollt: - Backup für Server mit den folgenden Betriebssystemen: + Windows Server + RHEL + Solaris + Debian Linux + Ubuntu Linux - Backup für folgende Anwendung: + SAP/HANA Grundsätzlich für den Rollout vorgesehen (nicht priorisiert): - Backup für Endgeräte mit den folgenden Betriebssystemen: + Windows-Client + macOSX - Backup für folgende Virtualisierungsplattformen: + VMware + Hyper-V + KVM + Openstack + Docker - Backup für folgende Anwendungen: + SAP/R3 auf Oracle DB + Oracle DB + RAC + MySQL + MSSQL + MS Exchange + Lotus Notes Domino + PostgreSQL + NoSQL-DBs (mongoDB, cassandra) + MS Sharepoint Wir bedanken uns an dieser Stelle für das konstruktive Feedback unter anderem über die Community-Liste und ganz besonders über die positiven Rückmeldungen, die wir in dieser Woche von Ihnen in E-Mailverkehr, Consulting-Sessions und Telefonaten erhalten haben. Wir wünschen allen ein erholsames Wochenende! Die besten Grüße Das Team für die Backup-Umstellung an der RWTH -- Nicole Filla, B.A. IT Center Gruppe: Server, Storage, HPC Abteilung: Systeme & Betrieb RWTH Aachen University Seffenter Weg 23 52074 Aachen (Germany) Tel.: + 49 241 80-77129 filla(a)itc.rwth-aachen.de www.itc.rwth-aachen.de Social Media Kanäle des IT Centers: https://blog.rwth-aachen.de/itc/ https://www.facebook.com/itcenterrwth https://www.linkedin.com/company/itcenterrwth https://twitter.com/ITCenterRWTH https://www.youtube.com/channel/UCKKDJJukeRwO0LP-ac8x8rQ

1 0

[Wichtig] Umstellung TSM auf „Read Only“ wird verschoben!
by Filla, Nicole 25 Nov '22

25 Nov '22

Liebe Backup-Admins, wir informieren Sie hiermit darüber, dass die für den 30.11.2022 terminierte Umstellung des Bestandssystems IBM-Spectrum Protect (TSM-Backup) auf „Read Only“ verschoben wird. Wir haben eine Reihe von Einrichtungen identifiziert, die bisher noch nicht auf die neue Backup-Plattform (Commvault-Backup) umgestellt haben. Diese Einrichtungen sind bereits diesbezüglich kontaktiert worden. Darüber hinaus sprechen sowohl betriebliche als auch personelle Gründe für eine Verschiebung des „Read Only“ Modus auf den 17. Januar 2023. Wir bedanken uns an dieser Stelle bei allen Admins für die tatkräftige Umstellung und Unterstützung vor allem in Form von konstruktivem Feedback. Alle weiteren Backup-Verantwortlichen weisen wir inständig darauf hin, die aktuelle Dynamik in der Umstellung beizubehalten und umzustellen. Um auch in potenziellen Notsituationen auf gesicherte Systemstände zurückgreifen zu können, bitten wir Sie, die Umstellung so schnell wie möglich voranzutreiben. Es liegt im Interesse aller Beteiligten den Ausstieg aus dem Parallelbetrieb zeitnah zu realisieren. Wir haben unter anderem auch aus diesen Gründen das Unterstützungsangebot ausgedehnt. Details zum Unterstützungsangebot haben wir hier für Sie zusammengestellt: https://blog.rwth-aachen.de/itc/2022/11/25/backup-umstellung-2022/ Wir weisen Sie an dieser Stelle nochmals darauf hin, dass der aktuelle Service-Umfang des Commvault-Backup-Systems an der Ablösung des Bestandssystems ausgerichtet ist. Wir möchten Sie bitten zum aktuellen Zeitpunkt von Anfragen zu weiteren Features abzusehen, um unsere Ressourcen auf die Umstellung konzentrieren zu können. Zur Orientierung erhalten Sie eine Zusammenstellung bereits angefragter Feature-Releases (z.B. VM-Backup, Datenbanken, Anwendungen, etc.) in den nächsten Tagen. Für Supportanfragen und Störungsmeldungen kontaktieren Sie bitte das IT-ServiceDesk. Mit freundlichen Grüßen Nicole Filla -- Nicole Filla, B.A. IT Center Gruppe: Server, Storage, HPC Abteilung: Systeme & Betrieb RWTH Aachen University Seffenter Weg 23 52074 Aachen (Germany) Tel.: + 49 241 80-77129 filla(a)itc.rwth-aachen.de www.itc.rwth-aachen.de Social Media Kanäle des IT Centers: https://blog.rwth-aachen.de/itc/ https://www.facebook.com/itcenterrwth https://www.linkedin.com/company/itcenterrwth https://twitter.com/ITCenterRWTH https://www.youtube.com/channel/UCKKDJJukeRwO0LP-ac8x8rQ

1 0

Blackout Window Commvault Backup
by Sascha Buecken 15 Nov '22

15 Nov '22

Sehr geehrte Kolleginnen und Kollegen, hiermit möchten wir Sie darüber informieren, dass es seit letzter Woche Freitag zu Problemen im Speicher-Backend des Commvault Systems kommt. Hitachi als Lieferant der Speichersysteme arbeitet mit Hochdruck an der Fehlerbehebung, leider gestaltet sich diese allerdings schwieriger als gedacht. Um das System nicht weiter unter Last zu setzen ist seit Freitag ein Blackout Window aktiv, so dass aktuell keine neuen Backupdaten entgegengenommen werden. Die Störungsmeldung zu dieser Problematik ist fälschlicherweise am Freitag ausgelaufen, wofür wir uns entschuldigen möchten. Die Störungsmeldung ist nun wieder aktiv und wir hoffen, dass das System schnellstmöglich wieder einsatzbereit ist. Mit freundlichen Grüßen Sascha Bücken -- Sascha Buecken Gruppenleiter "Server, Storage, HPC" IT Center Gruppe: Server, Storage, HPC Abteilung: Systeme und Betrieb RWTH Aachen University Seffenter Weg 23 52074 Aachen Tel: + 49 241 80-29725 Fax: + 49 241 80-22134 buecken(a)itc.rwth-aachen.de www.itc.rwth-aachen.de Social Media Kanäle des IT Centers: https://blog.rwth-aachen.de/itc/ https://www.facebook.com/itcenterrwth https://www.linkedin.com/company/itcenterrwth https://twitter.com/ITCenterRWTH https://www.youtube.com/channel/UCKKDJJukeRwO0LP-ac8x8rQ

1 1

Neuigkeiten zu Störungsmeldungen Commvault-Backupsystem
by Filla, Nicole 08 Nov '22

08 Nov '22

Liebe Backup-Admins, vielen Dank, dass Sie unsere Backup-Info-Mailingliste abonniert haben. Wir möchten Sie über die aktuellen Entwicklungen hinsichtlich der vorliegenden Störungen hinweisen. Störungsmeldungen: https://maintenance.itc.rwth-aachen.de/ticket/status/messages/16-backup-und… a) Störung "Zuweisung von Berechtigungen neuer User inkorrekt" vom 22.09.-07.11.2022 Betroffenes System: Commvault-Backupsystem Auswirkung: User, die sich nach dem 22.09. erstmalig in Commvault angemeldet haben, erhielten keine korrekten Berechtigungen sowie Gurppenzuordnungen. Downloads und Client-Verwaltung waren dadurch u.U. nicht möglich. Update: Das Problem konnte gelöst werden. User erhalten beim Login in Commvault nun alle vorgesehenen Rechte. b) Störung " Probleme im zugrundeliegenden Speichersystem" vom 26.09.2022 Betroffenes System: Commvault-Backupsystem Auswirkung: - Fehlgeschlagene Backups - Unterbrechungen bei laufenden Backup Jobs - vermehrte Abbrüche bei Backups und Restores Update: - neue Commvault Media Agent Grids sind erstellt worden - ebenfalls neuer Speicherbereiche und Serverpläne Folge: - Viele neue Fullbackups sind durchgeführt worden. Aufgrund der Anzahl neuer Knoten kann es zu Warteschlagen kommen. Diese Prozesse werden automatisch abgearbeitet - SLAs von Backup Jobs werden in den meisten Fällen erfüllt In den letzten Wochen haben das Backup-Team sowie Hersteller intensiv, daran gearbeitet die uneingeschränkte Betriebsbereitschaft herzustellen. Aktuell sind wir auf einem sehr guten Weg. Vielen Dank für Ihr Verständnis und das entgegengebrachte Vertrauen. Mit freundlichen Grüßen Nicole Filla -- Nicole Filla, B.A. IT Center Gruppe: Server, Storage, HPC Abteilung: Systeme & Betrieb RWTH Aachen University Seffenter Weg 23 52074 Aachen (Germany) Tel.: + 49 241 80-77129 filla(a)itc.rwth-aachen.de www.itc.rwth-aachen.de Social Media Kanäle des IT Centers: https://blog.rwth-aachen.de/itc/ https://www.facebook.com/itcenterrwth https://www.linkedin.com/company/itcenterrwth https://twitter.com/ITCenterRWTH https://www.youtube.com/channel/UCKKDJJukeRwO0LP-ac8x8rQ

1 0