Heute teilen wir eine lesenswerte Geschichte eines Systemadministrators. Vor genau einem Monat, am Samstag, den 8. Juli 2023, begannen Benutzerkonten aus Vivaldi Social, unserer Mastodon-Instanz, zu verschwinden.
Was ist passiert, wie ist es dazu gekommen, und was waren die Folgen?
An jenem Samstag kam der Vivaldi-Sysadmin Thomas Pike nach einer Radtour nach Hause (vielleicht war er zu seiner Chorprobe unterwegs. Ja, dieser Systemadministrator ist auch ein Opernsänger!) und bemerkte, dass etwas nicht stimmte, als er feststellte, dass seine Home-Timeline auf Vivaldi Social leer war. Das machte ihn neugierig. Er überprüfte einige weitere Benutzer und stellte fest, dass einige Konten gelöscht und dann als völlig neues Konto neu erstellt worden waren, als sich der Benutzer wieder anmeldete.
Hier begann die Ermittlung. Und es gab kein Zurück mehr! Thomas leistete großartige Arbeit, um dem Problem auf den Grund zu gehen, und stellte schließlich nach sehr langen Stunden die Daten wieder her.
Thomas hat das gesamte Wochenende dokumentiert, das zur Lösung dieses Problems nötig war. Wir sind sehr beeindruckt von diesem akribisch geschriebenen Blogbeitrag und empfehlen dir, ihn zu lesen ➡ https://thomasp.vivaldi.net/2023/07/28/what-happened-to-vivaldi-social/
Und es gibt auch einen TL;DR (zu lang; nicht gelesen) Abschnitt am Ende.
Hier ist eine kurze Zusammenfassung der Ereignisse bei Vivaldi Social.
- Samstag 15:15 – Vivaldi Social erhält eine Nachricht zur Kontoumbenennung von einer externen Instanz. Als Reaktion darauf startet die Rogue Account Merge Operation.
- Samstag 15:25 – Erste Anzeichen des Vorfalls werden bemerkt.
- Samstag 17:20 – Der Vorgang der Kontenzusammenführung wird nach dem Neustart der Docker-Container gestoppt. Insgesamt wurden zwischen 15:15 und 17:20 Uhr 198 Konten gelöscht/zusammengeführt.
- Sonntag 13:00 – Die wahrscheinliche Ursache wird ermittelt.
- Sonntag 14:25 – Die Ursache ist bestätigt.
- Sonntag 21:55 – Beginn der Datenwiederherstellung.
- Sonntag 23:27 – Datenwiederherstellung abgeschlossen.
- Montag 10:40 – 6 betroffene Konten mit Symbolen im Benutzernamen sind behoben.
- Montag 11:05 – Die verlorenen Daten der Web-Einstellungen werden wiederhergestellt.
- Dienstag 15:31 – Falsche Zählerwerte wurden korrigiert.
- Dienstag 16:01 – 4 Konten mit ungültigen Daten wurden korrigiert.
Dieser Vorfall erinnert uns daran, dass Sysadmins unbesungene Helden sind, deren Bedeutung nicht hoch genug eingeschätzt werden kann. Sie sind die Vordenker hinter den Kulissen, die unermüdlich daran arbeiten, dass die Technologiesysteme reibungslos und nahtlos funktionieren. Ohne ihr Fachwissen gäbe es ständig Unterbrechungen, Ausfallzeiten und Schwachstellen.
Im Namen aller Benutzer, deren Konten betroffen waren, möchten wir Thomas und allen, die bei der Lösung des Problems mitgeholfen haben, unseren Dank aussprechen.
Wenn du gerne Geschichten von Sysadmins liest, dann war dieser Artikel sicher lesenswert!
Kennst du interessante Geschichten, in denen Sysadmins den Tag gerettet haben?
Wenn ja, dann schreib sie uns unten in den Kommentaren oder in Thomas‘ Blog.
Möchtest du ein neues, zuverlässiges soziales Netzwerk ausprobieren? Probiere doch mal Vivaldi Social aus. Unser Ziel bei der Gründung von Vivaldi Social auf Mastodon war es, bessere Alternativen für die Kommunikation zwischen Menschen in einer algorithmusfreien Umgebung ohne Überwachungskapitalismus, ohne Tracking oder Datenprotokollierung anzubieten. Lies mehr.
