Cloud Data Engineer (m/w/d)
Hamburg, DE, 20097
Als Cloud Data Engineer (m/w/d) sind Sie verantwortlich für die architektonische Konzeption, die Entwicklung und den produktiven Betrieb der globalen Analytics-Plattform. Implementierung der Azure Infrastruktur und der Databricks Workspaces sowie die Entwicklung des Datenworkflows zwischen verschiedenen Quellsystemen, Data Lake und Data Warehouse.
Die Umgebung ist technologisch zukunftsorientiert und 2023 auf einer kompletten grünen Wiese mit einem Cloud-first-Ansatz gestartet worden. Hier gibt es viel Entwicklungsspielraum, den Sie maßgeblich mitgestalten dürfen und somit HELM ins Data-Driven Zeitalter hieven.
Ihre Aufgaben:
- Sie sind die erste Kontaktperson für die Analytics Plattform sowie bei der Unterstützung der Kollegen aus der IT und dem Business im Data Analytics Umfeld. Zudem sind Sie ein wichtiger Bestandteil an relevanten Entwicklungsprojekten für die globale Datenplattform.
- Sie stimmen sich mit internen Stakeholdern und externen Partnern bei der Entwicklung und Umsetzung von Anpassungen an der Plattform und den bestehenden Systemen ab.
- Sie entwerfen, implementieren und verwalten Cloud-basierte Datenpipelines und ETL-Prozesse.
- Die Weiterentwicklung einer existierenden Cloud-Data-Plattform gehört ebenfalls zu Ihren Aufgaben.
- Sie führen Data Cleansing, -Matching und -Merging aus. Gleichzeitig kümmern Sie sich um das Data Enrichment inklusive dem Aufbau und der Wartung von Cloud-Datenintegrationsprozessen
- Sie stellen die Gewährleistung der Datenqualität, Datenintegrität und Datenverfügbarkeit in der Cloud-Umgebung sicher.
- Sie garantieren den Aufbau und die Pflege von automatisierten Datenvalidierungs- und -bereinigungsprozessen. Weiterhin bauen Sie ein Modern Datawarehouse/Lakehouse in einer Cloud Umgebung auf.
- Ihre Aufgaben werden abgerundet durch die Optimierung und Skalierung der Datenbanken und der Dateninfrastruktur in der Cloud.
- Ihr Ziel ist es die HELM AG zu einer „Data-Driven-Company" zu entwickeln.
Ihr Profil:
- Sie konnten bereits fundierte Kenntnisse in der Anwendung von Cloud Data Plattformen (bevorzugt Azure Data Factory, Azure Synapse Analytics, Azure Storage, Azure Active Directory) sammeln.
- Die Entwicklung und Wartung von Datenbewirtschaftungslösungen (ETL, ELT, Streaming, etc.) gehörte in der Vergangenheit bereits zu Ihren Aufgaben.
- Sie kennen sich mit der Datenmodellierung (Data Vault, Kimball, 3NF) sowie dem Verwenden von Data Governance, Data Catalog Werkzeugen und deren Methoden aus.
- Ihre vertiefte Erfahrung mit dem Einsatz von Data Warehouse Automation Tools (Datavault Builder, Matillion, WhereScape, BIML) können Sie für diese Position einbringen.
- DevOps-Konzepte und Werkzeuge (Azure DevOps) sind für Sie keine Fremdwörter.
- Im Bereich Data und Network Security kennen Sie sich aus.
- Sie beherrschen die Programmiersprache Python für Notebooks zur automatisierten Datenbereinigung.
- Sie haben Spaß daran kleinere Projekte durchzuführen und sind versiert in agilen Projektmanagementmethoden.