Datenmigration zu Google Cloud BigQuery und Sicherstellung des reibungslosen Datenbetriebs für die führende E-Commerce-Plattform
Challenge
Unser Ziel war es, Daten zu Google Cloud BigQuery zu migrieren, was sich bereits in der gesamten Organisation unseres Kunden als erfolgreich erwiesen hatte. Der native BigQuery-Writer, der in das Tool des Kunden integriert war, bot jedoch nur begrenzte Optionen und bot nicht das vom Kunden geforderte Maß an Datenverwaltung.
Our approach
Um die notwendigen Funktionen bereitzustellen, haben wir den nativen Writer in den Python-Code integriert, der die GCP-API nutzt und die fehlenden Funktionen implementiert. Die daraus resultierende Lösung kann problemlos erweitert werden, um zukünftigen Anforderungen gerecht zu werden.
The outcome
Wir haben alle erforderlichen Aufgaben erfolgreich abgeschlossen und den reibungslosen Ablauf der Datenübertragungsflüsse ohne menschliches Eingreifen gewährleistet.