Als Data Engineer / Architekt bei einem globalen Fertigungsunternehmen verantworte ich die Entwicklungsaktivitäten im Data Operations Team (4 Personen). Unser Fokus liegt auf der Wartung der bestehenden Datenplattform sowie der Migration zu einer modernen Cloud-Datenplattform
Aufbau von Frameworks und Richtlinien für die Entwicklung von Data Use Cases auf Azure, mit besonderem Fokus auf Databricks, Synapse und Purview
Zusammenarbeit mit der IT-Abteilung zur Gestaltung und Umsetzung einer performanten und konformen Cloud-Architektur
AzureDatabricksSynapseEventHubMS SQL Server
PythonSQLSpark
6 Monate
2023-05 - 2023-10
Wartung und Erweiterung von On-Premise Datenarchitektur
Data / Platform EngineerPythonLinuxApache Spark
Data / Platform Engineer
Konfiguration, Erweiterung und Deployment von Open-Source-Technologien für Datenverarbeitung, Orchestrierung und Governance, als Grundlage für Data Engineering- und Data Science Use Cases
Entwicklung von Software-Pipelines zum Testen, Bauen und Deployen containerbasierter Anwendungen (CI/CD, GitOps)
Senior Data Engineer / ArchitektPythonApache Spark
Senior Data Engineer / Architekt
Aufbau des Backends für eine Quality-Management-Datenplattform, die Daten aus internen Systemen und sozialen Medien zusammenführt, zur Messung der Kundenzufriedenheit und Entwicklung gezielter Maßnahmen für über 300?Mio. Kunden jährlich
Konzeption und Umsetzung der architektonischen Grundlagen der Datenplattform
Coaching des Kunden und von Junior-Kollegen zu Data-Engineering-Themen und Best Practices
Entwicklung eines Systems zur automatischen Klassifizierung von Kundenfeedback, Durchführung von Sentiment-Analysen und Ermittlung der Geo-Location
DatabricksAzure
PythonApache Spark
1 Jahr 6 Monate
2021-07 - 2022-12
On-premise zu Azure und Databricks Migration
Data EngineerPythonSQLApache Spark
Data Engineer
Aufbau eines Data Hubs auf Azure mit Databricks und SQL Server zur Konsolidierung von Terabytes an Daten aus verschiedenen Quellsystemen in einer semantischen Schicht für alle Bestelldaten eines Automobilunternehmens
Optimierung bestehender Datenpipelines durch Caching, Partitionierung, Konfigurationsanpassungen und Refactoring, mit bis zu 10-facher Reduktion der Verarbeitungszeit
Planung, Spezifikation und Entwicklung innerhalb eines internationalen Teams von 12 Personen koordiniert und umgesetzt
AzureMS SQL ServerDatabricks
PythonSQLApache Spark
7 Monate
2019-09 - 2020-03
Prozessautomatisierung mit Machine Learning
Data ScientistPythonSQLApache Spark...
Data Scientist
Entwicklung einer Computer-Vision-Lösung für Objekterkennung und Bildsegmentierung, die eine zuvor manuell durchgeführte, arbeitsintensive Aufgabe von Forschern eines führenden Unternehmens im Bereich Hygiene und Gesundheit nahezu vollständig automatisiert hat
Als Data Engineer / Architekt bei einem globalen Fertigungsunternehmen verantworte ich die Entwicklungsaktivitäten im Data Operations Team (4 Personen). Unser Fokus liegt auf der Wartung der bestehenden Datenplattform sowie der Migration zu einer modernen Cloud-Datenplattform
Aufbau von Frameworks und Richtlinien für die Entwicklung von Data Use Cases auf Azure, mit besonderem Fokus auf Databricks, Synapse und Purview
Zusammenarbeit mit der IT-Abteilung zur Gestaltung und Umsetzung einer performanten und konformen Cloud-Architektur
AzureDatabricksSynapseEventHubMS SQL Server
PythonSQLSpark
6 Monate
2023-05 - 2023-10
Wartung und Erweiterung von On-Premise Datenarchitektur
Data / Platform EngineerPythonLinuxApache Spark
Data / Platform Engineer
Konfiguration, Erweiterung und Deployment von Open-Source-Technologien für Datenverarbeitung, Orchestrierung und Governance, als Grundlage für Data Engineering- und Data Science Use Cases
Entwicklung von Software-Pipelines zum Testen, Bauen und Deployen containerbasierter Anwendungen (CI/CD, GitOps)
Senior Data Engineer / ArchitektPythonApache Spark
Senior Data Engineer / Architekt
Aufbau des Backends für eine Quality-Management-Datenplattform, die Daten aus internen Systemen und sozialen Medien zusammenführt, zur Messung der Kundenzufriedenheit und Entwicklung gezielter Maßnahmen für über 300?Mio. Kunden jährlich
Konzeption und Umsetzung der architektonischen Grundlagen der Datenplattform
Coaching des Kunden und von Junior-Kollegen zu Data-Engineering-Themen und Best Practices
Entwicklung eines Systems zur automatischen Klassifizierung von Kundenfeedback, Durchführung von Sentiment-Analysen und Ermittlung der Geo-Location
DatabricksAzure
PythonApache Spark
1 Jahr 6 Monate
2021-07 - 2022-12
On-premise zu Azure und Databricks Migration
Data EngineerPythonSQLApache Spark
Data Engineer
Aufbau eines Data Hubs auf Azure mit Databricks und SQL Server zur Konsolidierung von Terabytes an Daten aus verschiedenen Quellsystemen in einer semantischen Schicht für alle Bestelldaten eines Automobilunternehmens
Optimierung bestehender Datenpipelines durch Caching, Partitionierung, Konfigurationsanpassungen und Refactoring, mit bis zu 10-facher Reduktion der Verarbeitungszeit
Planung, Spezifikation und Entwicklung innerhalb eines internationalen Teams von 12 Personen koordiniert und umgesetzt
AzureMS SQL ServerDatabricks
PythonSQLApache Spark
7 Monate
2019-09 - 2020-03
Prozessautomatisierung mit Machine Learning
Data ScientistPythonSQLApache Spark...
Data Scientist
Entwicklung einer Computer-Vision-Lösung für Objekterkennung und Bildsegmentierung, die eine zuvor manuell durchgeführte, arbeitsintensive Aufgabe von Forschern eines führenden Unternehmens im Bereich Hygiene und Gesundheit nahezu vollständig automatisiert hat