Vom Data Warehouse zur Data Platform in der Cloud

Die richtige Organisationsstruktur fördert die Datenkompetenz

Um einen reibungslosen und effektiven Prozess von der Datenproduktion über das Reporting bis hin zur Verwendung der Daten in Machine Learning zu gewährleisten, musste Scout24 entsprechende organisatorische Strukturen schaffen. Das Unternehmen hat hierfür einzelne Marktsegmente benannt, die jeweils einen eigenen Businessfokus haben und sehr autonom agieren.
Data & Analytics unterstützt die Marktsegmente als Platform Team und bietet verschiedene Services zur Datenverarbeitung und Datenanalyse an. Zudem treibt der Bereich die selbstständige, datengesteuerte Produktentwicklung voran. Die Teams gliedern sich in folgende Verantwortungsbereiche:
  • Data Platform Engineering: Betrieb des Data Lake und Weiterentwicklung der Tools zu Datenprozessierung
  • Data Access Services & Solutions: Unterstützung der Segment Product Engineers bei der Dateninjektion und -transformation sowie der Produktmanager und Analysten bei der Datenauswertung
  • Data Availability: Bereitstellung und Weiterentwicklung von Core Data
  • Market Analytics & Products: Entwicklung von skalierbaren Dataprodukten zur Förderung der Markttransparenz
  • Zentralanalysten: Vorantreiben von unternehmensübergreifenden analytischen Themen
  • Segmentanalysten: Segmentspezifische Analysen in Zusammenarbeit mit Marktsegmenten
  • Data Science: Bau der komplexen Datenprodukten in Zusammenarbeit mit Marktsegmenten
  • Machine Learning Engineering: Aufbau und Betrieb der AI Platform
Data & Analytics bei Scout24 ist ein gelungenes Konstrukt, das selbstständige, datengesteuerte Produktentwicklung bei Scout24 propagiert und unterstützt. Alle Anwender benutzen die Data Platform im Self-Service-Modus – egal, ob es dabei um das Schreiben der Daten in den Data Lake, das Finden von Daten oder das Generieren von neuen Insights geht.

Ein Kulturwandel hin zu transparenten Prinzipien im Umgang mit Daten

Um technologische und strukturelle Veränderungen effektiv umzusetzen, war ein Wandel der Unternehmenskultur notwendig. Bei Scout24 hatten wir uns das Ziel gesetzt, eine effektive Kooperation zwischen Datenproduzenten und Konsumenten zu ermöglichen, ohne zu stark in deren Autonomie einzugreifen.
Daraus haben wir sieben Prinzipien zum Umgang mit Daten definiert und in unserem Scout24 Data Landscape Manifesto festgehalten. Die Prinzipien betreffen sowohl den Datenproduzenten als auch den Konsumenten und sollen eine effektivere Zusammenarbeit fördern.
Das zentrale Data & Analytics Team stellt also nicht nur eine Data Platform zur Verfügung, sondern liefert direkt die Tools und Guidelines für deren effektive Nutzung. Das ermöglicht eine gewisse Autonomie für die Datenproduzenten, da diese weiterhin die volle Kontrolle über die produzierten Daten behalten. Um eine mögliche Anarchie zu vermeiden, erfordert diese Autonomie von den Datenproduzenten auch das volle Verantwortungsbewusstsein, was wiederum dazu beiträgt, noch datengetriebener zu arbeiten.
Während die Verantwortung für die Qualität der so veröffentlichten Daten bei den jeweiligen Datenproduzenten liegt, sind die Datenkonsumenten für die Definition, Implementierung und Visualisierung von Metriken verantwortlich. Ausgenommen von dieser Regel sind die Daten, die für das gesamte Unternehmen relevant sind – die sogenannte Core Data. In Falle von Core Data übernimmt das zentrale Data & Analytics Team die Metrikdefinitionen und Implementierung sowie sämtliche Datentransformationen.

Weg von der zentralen Kontrolle, hin zum Model der geteilten Verantwortlichkeiten – wie stösst man solche Veränderungen an?

Die Services der Plattform – automatische Veröffentlichung und Partitionierung der Tabellen, optimierte Dateienformate, Backup und Recovery, Zugriffskontrolle für zugangsbeschränkte Daten – hat die Datenproduktion, die Datenspeicherung und die Verarbeitung signifikant erleichtert.
Davon war das Data & Analytics Team überzeugt und hat dies auch ins Unternehmen getragen. Doch fest steht: Die Umstellung ist eine tiefgreifende Veränderungen im Unternehmen, die einen erfolgreichen Kulturwandel voraussetzt. Dieser Kulturwandel ist der Schlüsselfaktor für eine erfolgreiche Migration.
Denn ohne die passende Mentalität bei den Mitarbeitern führen weder der modernste Stand der Infrastruktur, noch Veränderungen der Organisationsstrukturen zwangsläufig zum Erfolg. Deswegen war es wichtig, dass das Data & Analytics Team Hands on Support angeboten und Erfolgsgeschichten mit den anderen Mitarbeitern geteilt hat.
Der Prozess des Kulturwandels ist noch nicht abgeschlossen. Doch eine weitere Stufe haben wir kürzlich genommen: Nach über zwei Jahren mit der Data Platform in der Cloud und dem Data Landscape Manifesto hat Scout24 2019 die alten DWHs abgeschaltet. Somit stehen alle Türen offen auf dem Weg hin zu einer Data-Literacy-Driven Firma mit dediziertem Daten-Umsatz.
Autoren
Krystyna Kurinna und Markus Schmidberger
Krystyna Kurinna ist Teamlead Data Access Services & Solutions, Markus Schmidberger ist Director Data Technology bei Scout24. Kurinna referierte an der letztjährigen TDWI-Konferenz. Die TDWI-Konferenz 2019 wird am 4./5. November erneut im Swissotel Oerlikon stattfinden.

Autor(in) TDWI



Das könnte Sie auch interessieren