Nahtlose BI-Migration für eine bessere Datenplattform

Mit migVisor™ beschleunigte Zalando die Migration zu Amazon Redshift und verbesserte den Zugriff auf geschäftsrelevante Daten.

Auf einen Blick

Kunde

Zalando

Strategischer Partner

Amazon Web Services (AWS)

Dienstleistung

Cloud-Datenmigration

Branche

Handel

Zalando, eine führende europäische Mode- und Lifestyle-Plattform, ist ein langjähriger Kunde von EPAM. Im Zuge der Modernisierung von Zalandos Datenplattformen und dem Ausbau der Analytics-Fähigkeiten, migrierten EPAM und Zalando gemeinsam die bestehende Data-Warehouse-Plattform, die die Grundlage der Business-Intelligence-Landschaft bildet, auf Amazon Redshift. Mit AWS und EPAM migVisorTM konnte die Migration reibungslos, effizient und vor dem geplanten Abschluss umgesetzt werden. Die modernisierte BI-Plattform bietet heute kürzere Abfragezeiten, effizientere Datenflüsse, bessere Skalierbarkeit und ein optimiertes Datenmanagement für mehr als 3.000 Nutzende und über 50 Datenteams.

MIGRATIONSSTRATEGIE

Beschleunigte Migration mit AWS und migVisor™

Zalando, eine führende Plattform für Mode- und Lifestyle-E-Commerce, arbeitet seit 2022 in über 15 Programmen und 25 Dateninitiativen mit EPAM und AWS zusammen. Diese Zusammenarbeit konzentriert sich auf die Modernisierung von Datenplattformen, die Bereitstellung fortschrittlicher Analysen und die Entwicklung von KI-Anwendungsfällen und -Modellen.

Im Zuge der Weiterentwicklung seiner Datenplattform und der stärkeren Ausrichtung auf AWS analysierte Zalando die bestehende DWH-Plattform, welche die BI-Funktionen unterstützt, und identifizierte dabei mehrere Herausforderungen:

Elastizität

Für Lastspitzen, die nur wenige Stunden pro Woche auftraten, fielen unverhältnismäßig hohe Kosten an.

Skalierbarkeit

Die Plattform konnte mit dem wachsenden Datenvolumen und den steigenden Anforderungen nicht mehr Schritt halten, was die Performance spürbar beeinträchtigte.

Betriebliche Risiken

Feste Session-Limits und komplexe Betriebsabläufe erhöhten das Risiko im Betrieb, insbesondere in Spitzenzeiten wie der Cyber Week.

Hohe teamübergreifende Abhängigkeiten

Mehr als 50 Datenteams waren auf die DWH-Plattform angewiesen. Damit war die Plattform ein geschäftskritischer Bestandteil des Datenökosystems von Zalando.

Modernisierung von Legacy-Code

Die Überführung und Modernisierung von Legacy-Code, darunter z.B. Lua-basierte Logik und benutzerdefinierte Routinen, erforderte eine grundlegende Überarbeitung von Prozessen und Workflows. Dadurch stiegen Aufwand und Risiko der Migration deutlich.

Nach der Analyse der Plattform und der Entwicklung einer Migrationsstrategie zur Bewältigung dieser Herausforderungen wandte sich Zalando an EPAM, um die effektive Umsetzung dieser Strategie zu unterstützen und die Finanzierung durch das AWS Migration Acceleration Program (MAP) zur Deckung der Kosten zu sichern. Mithilfe von AWS-Tools und -Lösungen sowie den Werkzeugen für Datenmigration von migVisor™ von EPAM konnte das Team bei der Migration zu AWS Redshift unterstützt werden.

Daten zwischen dem Redshift-Cluster und dem bestehenden DWH wurden mit dem DataHub synchronisiert und anschließend wurden die Workloads migriert, um die Daten zu erzeugen. Dieser Ansatz ermöglichte es, parallel zu arbeiten und die Abhängigkeiten zwischen den Migrationsaufwänden der Teams zu reduzieren, da die Daten bereits vorhanden waren. Durch die Entkopplung von Speicherung und Rechenleistung ließen sich Skalierbarkeit und Kostenzuordnung verbessern.

Um Störungen und Risiken zu minimieren, wurde ein stufenweiser Umstellungsansatz gewählt, bei dem Teams von EPAM und Zalando Objekte und Transformationslogik in Redshift erstellten und somit die bestehende DWH-Plattform als Datenquelle nutzten. Abschließend überprüften einzelne Datenteams von Zalando alle Redshift-Objekte, erteilten die Endabnahme und stellten so die vollständige Genauigkeit sicher.

Die migVisor™-Toolsuite verhalf zu einer erfolgreichen Migration: migVisor™ Analytics hat den Migrationsumfang durch detaillierte Datenherkunft optimiert, migVisor™ Convertor hat die Effizienz und die Migrationszeit verbessert, und migVisor™ Reconciler hat die Genauigkeit der Daten sichergestellt und den Aufwand der Validierung reduziert.

Die Migration wurde im Rahmen des Budgets und vorzeitig innerhalb des geplanten Zeitraums von 16 Monaten abgeschlossen. Dadurch konnte Zalando eine bessere Abfrageleistung, eine höhere Effizienz des Datenflusses und ein optimiertes Datenmanagement erzielen. Dank der verbesserten Skalierbarkeit kann Zalando nun den Anforderungen der mehr als 3000 geschäftlich Nutzenden und 50 Datenteams, die die Plattform nutzen, gerecht werden.

ERGEBNISSE

3000+

Endnutzer verwenden die neue Plattform

50+

Datenteams erfolgreich migriert

43%

Reduzierung der Ausführungszeiten von Berichtsabfragen

60%

Verbesserung der Ausführungszeit umfangreicher Berichte

TECHNOLOGIE-STACK