Schweizer Stiftung im Bildungsbereich schafft moderne und flexible Speicherumgebung für Forschungseinrichtungen mit Cloudian
SWITCH setzt sich im Auftrag der Bildungs-, Forschungs- und Innovations-Community für die digitale Zukunft der Schweiz ein. Mit ihrer Expertise in diesem Bereich fördert die Stiftung Initiativen in den Bereichen Cybersecurity und digitale Identitäten sowie eine bessere Nutzung von Forschungsdaten.
Aufgrund ihres Bedarfs an einer äußerst robusten und flexiblen Lösung zur Langzeitspeicherung von Daten, mit der SWITCH und ihre Kunden archivierte Daten einfach und kostengünstig verwalten und abrufen können, entwickelte die Stiftung eine neue Speicherinfrastruktur mit mehreren Petabytes. Diese basiert auf dem HyperStore-Objektspeicher von Cloudian. Diese neue Infrastruktur bietet die nötige Skalierbarkeit, Leistung und S3-Kompatibilität, um modernen Speicheranforderungen gerecht zu werden – einschließlich dem Schutz vor Ransomware.
Komplexität und Kosten eines wachsenden Datenarchivs
Schweizer Hochschulen und Forschungsinstitute haben mit immer größeren Datenmengen zu kämpfen und müssen diese Daten aufgrund von gesetzlichen Vorschriften mindestens zehn Jahre, und in manchen Fällen sogar länger, aufbewahren und archivieren. Die damit verbundene Komplexität und die Kosten stellen eine gewaltige Herausforderung dar und zwingen Forscher und Verwaltungsmitarbeiter dazu, bestimmte Daten auf Kosten anderer potenziell ebenso wertvollen Informationen zu priorisieren.
In Zusammenarbeit mit der École Polytechnique Fédérale de Lausanne (EPFL) und den Forschungsgemeinschaften FORS, SDSC und DLCM hat sich SWITCH dieser Herausforderung in der Datenspeicherung von Universitäten und Forschungseinrichtungen gestellt. Ziel des Projektes war es, einen langfristigen Archivierungsdienst aufzubauen, der auf den Bedarf an robuster und nachhaltiger Datenspeicherung in der Forschung ausgerichtet ist und in eine Reihe von Anwendungen integriert werden kann.
Zu Beginn stellten sich zwei Use Cases als besonders wichtig heraus: Zum einen muss bei der Verwaltung von Forschungsdaten berücksichtigt werden, dass Forscher regelmäßig auf die zuvor archivierten Daten zurückgreifen müssen, um sie entweder mit neuen Daten zu vergleichen oder sie im Zusammenhang mit neuen Erkenntnissen zu untersuchen. Darüber hinaus müssen sie in der Lage sein, archivierte Daten problemlos als Arbeitsdaten wiederherzustellen, ohne sich um die zusätzlichen Kosten kümmern zu müssen, die viele öffentliche Cloud-Anbieter für den Datenabruf berechnen.
Zum anderen müssen Verwaltungsdaten für Regulierungs- und Prüfungszwecke langfristig gespeichert werden. In diesem Fall kann die Speicherung mit klassischeren Lösungen zur Datenaufbewahrung integriert werden, wobei regelmäßige Daten-Snapshots an einen anderen Standort verschoben werden. Um jedoch die gesetzlichen Vorschriften und Prüfungsanforderungen zu erfüllen, benötigen Forschungseinrichtungen Zugang zu den Protokollen und Aufzeichnungen, um sicherzustellen, dass die Daten nicht verändert werden.
Eine moderne Infrastruktur auf der Grundlage von Objektspeicher
Als SWITCH sich an Cloudian wandte, nutzte das Unternehmen bereits seit sieben Jahren Infrastructure-as-a-Service (IaaS). Diese Infrastruktur basierte vor allem auf Open-Source-Softwarekomponenten wie OpenStack und Ceph, die SWITCH auch weiterhin nutzt. Mit der Zunahme an Use Cases für native Objektspeicher brauchte die Speicherinfrastruktur der Stiftung jedoch bald alle unterstützten Funktionen von S3, die Cloudian als integralen Bestandteil ihres Systems bereitstellte.
Um beiden Use Cases gleichermaßen gerecht zu werden, benötigte SWITCH eine Speicherinfrastruktur, die eine breite Palette potenzieller Archivierungstools und -systeme unterstützt, geografische Ausfallsicherheit gegenüber dem primären Datenstandort bietet und die Datenintegrität gewährleistet. Weitere Auswahlkriterien waren die Skalierbarkeit, Nachhaltigkeit, das Preis-Leistungs-Verhältnis und die S3-Kompatibilität der Lösung. Eine hohe Leistung war zudem ein entscheidender Faktor, insbesondere für Veeam-Anwender, deren Veeam-Side-Architektur benutzerdefinierte Konfigurationen und Hardware zur Bewältigung des Workloads erfordert. SWITCH entschloss sich deshalb dazu, die Speicherinfrastruktur der Stiftung umzugestalten und eine Lösung zu suchen, die auf ihre spezifischen Anforderungen ausgerichtet ist. Auf der Suche nach der richtigen Lösung evaluierte die Stiftung verschiedene Angebote.
„Wir haben verschiedene Angebote geprüft, darunter IBM-Tape- und NetApp-Diskprodukte“, erklärt Ann Harding, Team Lead, Infrastructure and Platform-as-a-Service (PaaS). „Leider sind im Bereich der Bildung und Forschung kostenintensive und unflexible Unternehmenslösungen mit komplexen Lizenzierungsprozessen einfach ungeeignet.“
HyperStore hingegen bot die perfekte Lösung.
„Wir sehen in der Objektspeichertechnologie die Zukunft der Speicherung, wollten aber aus Gründen der Datenhoheit keinen der großen US-amerikanischen Public-Cloud-Anbieter nutzen“, sagt Harding. „Cloudian bietet die Skalierbarkeit und Flexibilität einer öffentlichen Cloud vor Ort mit vollständiger nativer S3-Kompatibilität. Uns gefällt auch die modulare Skalierbarkeit von HyperStore und die nahtlose Integration mit Veeam, so dass wir das Unternehmen für einen idealen langfristigen Partner halten.“
Eine Lösung für alles
Im Rahmen der Neuaufstellung ihrer Speicherstruktur setzte die Stiftung fünf Petabyte HyperStore-Objektspeicher für die Langzeitarchivierung und zwei Petabyte für die aktive Anwendung von Objektspeicher-Daten ein.
Zudem arbeitete Cloudian eng mit SWITCH zusammen, um benutzerdefinierte Hardwarespezifikationen und -konfigurationen zu erstellen, die sowohl die Kosten für die langfristige Speicherung als auch die erforderliche Leistung für die aktive Datennutzung gewährleisten.
„Mit Cloudian haben wir eine zukunftssichere Speichergrundlage, bei der der wissenschaftliche Bedarf und nicht die festgelegten Preismodelle bestimmen, wie die Daten genutzt werden“, sagt Harding. „Das ist wichtig, denn die Institutionen, mit denen wir zusammenarbeiten, sind finanziell eingeschränkt, wenn sie ihre Daten über einen langen Zeitraum speichern wollen.“
Die neue HyperStore-basierte Infrastruktur ermöglicht es Schweizer Hochschulen und Forschungsinstituten, alle Arten von Daten im SWITCH Archiv zu speichern – von Bildern der Zürcher Hochschule der Künste (ZHdK) bis hin zu Daten aus großen Forschungsprojekten in einer Cloud-nativen Umgebung. Bei Bedarf können die Daten schnell und einfach abgerufen werden.
Darüber hinaus können SWITCH Kunden, die die Backup-Software von Veeam verwenden, die Vorteile von Cloudians S3 Object Lock zum Schutz vor Ransomware nutzen. Mit Object Lock können Anwender die Backup-Daten unveränderbar machen und so verhindern, dass Cyber-Kriminelle die Daten löschen oder verschlüsseln. Nicht nur wird damit Ransomware unwirksam gemacht, sondern die Daten können im Falle eines Cyber-Angriffs auch schnell und einfach wiederhergestellt werden, ohne dass Lösegeld gezahlt werden muss.
„Das Schöne am HyperStore-Objektspeicher von Cloudian ist, dass unsere Nutzer alle S3-unterstützenden Anwendungen und Bibliotheken verwenden können und es einfach funktioniert“, betont Harding. „Wir können im Service-Provider-Modus arbeiten, ohne uns um die Support-Auslastung kümmern zu müssen. Unsere Kunden können sich unterdessen voll und ganz auf ihre Bildungs- und Forschungsziele konzentrieren.“
Über SWITCH
SWITCH ist die kompetente Vertrauenspartnerin für die gemeinsamen Digitalisierungsanliegen der Bildungs-, Forschungs- und Innovations-Community in der Schweiz. Die unabhängige Stiftung unterstützt Hochschulen und weitere Partner innerhalb und außerhalb der akademischen Welt, die Möglichkeiten der Digitalisierung effektiv und effizient zu nutzen. Seit den Anfängen des Internets ist SWITCH auch die Registry für Domain-Namen mit den Endungen .ch und .li. SWITCH betreibt als eines der Schweizer Kompetenzzentren für Internetsicherheit ein Multisektor-CERT, das Dienstleistungen für Hochschulen, die Domain-Registrierungsstelle, Banken, Industrie und Logistik sowie den Energiesektor anbietet.
Weitere Informationen unter https://www.switch.ch
Industrie
Bildung und Forschung
Herausforderung
Bedarf nach einem robusten und kostengünstigen Langzeitspeicher, der verschiedene Archivierungsanforderungen erfüllen kann
LÖSUNG
7 PB Cloudian HyperStore Objektspeicher
Vorteile
- Vollständig native S3-Kompatibilität
- Modulare, grenzenlose Skalierbarkeit
- Kostengünstig
- Schutz vor Ransomware
- Eine einzige Plattform für traditionelle und moderne, Cloud-native Anwendungen
- Nahtlose Integration mit Veeam-Backup-Software