Python Development, Machine Learning, Data Engineering, Cloud
Aktualisiert am 16.04.2025
Profil
Mitarbeiter eines Dienstleisters
Remote-Arbeit
Verfügbar ab: 20.04.2025
Verfügbar zu: 100%
davon vor Ort: 100%
Skill-Profil eines fest angestellten Mitarbeiters des Dienstleisters
Deutsch
Verhandlungssicher
Englisch
Verhandlungssicher
Französisch
Verhandlungssicher

Einsatzorte

Einsatzorte

Berlin (+50km)
Deutschland
möglich

Projekte

Projekte

1 Jahr 3 Monate
2024-01 - heute

Entwicklung einer Datenplatform

Data Engineer Azure dbt Snowflake ...
Data Engineer
  • Entwicklung des Backendes einer Datenplattform
  • Data Engineering
  • Konzeption
Azure dbt Snowflake Python SQL Streamlit
1 Jahr 8 Monate
2023-08 - heute

Datenmigration

Data Engineer Python SQL Docker ...
Data Engineer

  • Entwicklung eines Python Package zur zentralen Extraktion und Pflege der Metadaten des Unternehmens (Datenstruktur, Tabellen Statistiken, Rowcount, Tabellenbeschreibung, Location)
  • Verarbeitung der großen Tabellen mittels Dask und DuckDB
  • Deployment des Python Package in einem Docker Container in einer VM on Premises
  • Verbindung zu den unterschiedlichen Datenquellen: Postgresql, DB2, Excel Tabellen, CSV, Parquet Files
  • Export der Metadaten-Reports als Excel
  • Senden der Metadaten-Reports nach Kafka (Confluent Cloud)
  • Weiterentwicklung einer Streamlit UI Anwendung zur Anzeige der Metadaten
  • Bereitstellung einer Jupyter-Lab Umgebung in einem Docker Container on Premises

Kafka DuckDB Confluent Cloud DB/2 Postgres
Python SQL Docker Kafka Linux Big Data Dask Pandas Parquet Streamlit Data Engineer Jupyter Notebooks Atlassian JIRA Atlassian Confluence
GELITA
Remote
4 Monate
2023-05 - 2023-08

Datenintegration

Data Engineer Azure azure functions python ...
Data Engineer
  • Integration des CRM Tool Hubspot mit dem (on Premises) ERP System Alphaplan
  • Entwicklung eines Kafka Producer Client für jede Entität (Contact, Company) in Azure function mit einem Timer Trigger um die Deltas aus Hubspot zu lesen und in die entsprechende Kafka Topic zu schreiben
  • Entwicklung eines Kafka Consumer Client für jede Entität (Contact, Company) on Premises um die Einträge aus der Kafka Topic in die entsprechende Tabelle (Ansprechpartner, Adresse) zu schreiben
  • Automatisierung und Optimierung der Datenpflege und der User Experience für die CRM Datenerfassung
Azure hubspot
Azure azure functions python sql kafka
Remote
1 Jahr 1 Monat
2022-04 - 2023-04

Deutscher Konzern für Konsumgüter, Düsseldorf / Remote

Data Engineer Python Pyspark SQL ...
Data Engineer

  • Analyse und Behebung von Fehlern in Pyspark und Machine Learn-ing Applikationen 
  • Stabilisierung der Use Cases durch die Implementierung von Monitoring Modulen 
  • Technische Implementierung der Änderungsanfragen und Deploy-ment mittels Azure Devops 
  • Migration von Datenverarbeitungsstrecken von Dremio auf Data-bricks 
  • Ansprechpartner für den Support verschiedener Use Cases 
  • MS Azure Technology Stack 
  • Databricks, Data Factory, Linux VM, Azure Devops 
  • Python, Pyspark, SQL, Linux 

Data Factory Linux VM Azure Devops Python Azure MS Azure Technology Stack Kafka
Python Pyspark SQL Linux Databricks Data Factory
Deutscher Konzern für Konsumgüter
Düsseldorf
10 Monate
2021-07 - 2022-04

Deutscher Konzern für Konsumgüter, Düsseldorf

Data Engineer Python Pyspark SQL
Data Engineer

  • Analyse und Dokumentation der Use Cases in Abstimmung mit dem Kunden
  • Migration und Deployment von Azure Ressourcen (Data Factory, Databricks, Key Vault) 
  • Bearbeitung von Python Skripten von Data Lake Gen1 und Data Lake Gen2 API
  • Deren Deployment auf virtuellen Maschinen mit An-passung der Packages
  • Entwicklung von Datenpipelines mittels Data Factory und Data-bricks 

MS Azure Technology Stack Databricks Data Factory Linux VM Azure Devops
Python Pyspark SQL
Deutscher Konzern für Konsumgüter
Düsseldorf
2 Jahre
2018-05 - 2020-04

Huf Group, Velbert - Automobilzulieferer, Düsseldorf

Component Test Engineer Requirements Engineering Qualitätssicherung
Component Test Engineer

  • Requirements Engineering, Ableitung von Testfällen
  • Abstimmung der Tests mit Kunden, Entwicklern und Zulieferern
  • Auswertung von Testdaten 

IBM DOORS
Requirements Engineering Qualitätssicherung
Huf Group, Velbert
Düsseldorf

Aus- und Weiterbildung

Aus- und Weiterbildung

1 Monat
2024-06 - 2024-06

Azure Data Engineer Associate

Zertifikat, Microsoft
Zertifikat
Microsoft
1 Monat
2022-10 - 2022-10

AWS Machine Learning Speacialty

Zertifikat, AWS
Zertifikat
AWS
1 Monat
2022-05 - 2022-05

Deep Learning Specialisation, DeepLearning.AI

Zertifikat, DeepLearning.AI
Zertifikat
DeepLearning.AI
3 Monate
2020-06 - 2020-08

Data Science Bootcamp

Spiced Academy, Köln
Spiced Academy, Köln
Python, Pandas, Numpy, Sklearn, Docker, AWS
1 Monat
2018-11 - 2018-11

Requirements Engineering, IREB-CPRE, Foundation Level

Zertifikat, IREB
Zertifikat
IREB
2 Jahre 1 Monat
2014-09 - 2016-09

Master of Science Elektrotechnik

Master of Science Elektrotechnik,
Master of Science Elektrotechnik

Energiesystemtechnik 

3 Jahre 11 Monate
2009-09 - 2013-07

Angewandte Physik

Bachlor,
Bachlor
Instrumentierung und physikalische Messungen

Position

Position

  • Data Engineer
  • Beratung / Consulting

Kompetenzen

Kompetenzen

Programmiersprachen

Azure, Data Engineering

Data Engineering 

» Python, Pyspark, SQL, Linux

» Snowflake, dbt

» Docker

» Microsoft Azure Technology Stack: Azure Data Lake Gen2, Databricks, Data Factory, Azure VM, Azure Devops, Azure Functions

» Migration von Daten und Applikationen 

» Entwicklung von Datenpipelines 

» Orchestration mittels Azure Data Factory 

» Monitoring von Machine Learning und Big Data Applikationen 

Machine Learning 

» Python, Pandas, Numpy, Matplotlib, Sklearn, XGboost, Tensor-flow, AWS Sagemaker 

» Exploratory Data Analysis 

» Data Preprocessing, Feature Engineering 

» Deployment mittels Docker, Flask, BentoML 

» Cloud Deployment mittels AWS Lambda 

Branchen

Branchen

  • Automobilzulieferer
  • Konsumgüter
  • Lebensmittel
  • Maschinenbau
  • Forschung & Entwicklung

Einsatzorte

Einsatzorte

Berlin (+50km)
Deutschland
möglich

Projekte

Projekte

1 Jahr 3 Monate
2024-01 - heute

Entwicklung einer Datenplatform

Data Engineer Azure dbt Snowflake ...
Data Engineer
  • Entwicklung des Backendes einer Datenplattform
  • Data Engineering
  • Konzeption
Azure dbt Snowflake Python SQL Streamlit
1 Jahr 8 Monate
2023-08 - heute

Datenmigration

Data Engineer Python SQL Docker ...
Data Engineer

  • Entwicklung eines Python Package zur zentralen Extraktion und Pflege der Metadaten des Unternehmens (Datenstruktur, Tabellen Statistiken, Rowcount, Tabellenbeschreibung, Location)
  • Verarbeitung der großen Tabellen mittels Dask und DuckDB
  • Deployment des Python Package in einem Docker Container in einer VM on Premises
  • Verbindung zu den unterschiedlichen Datenquellen: Postgresql, DB2, Excel Tabellen, CSV, Parquet Files
  • Export der Metadaten-Reports als Excel
  • Senden der Metadaten-Reports nach Kafka (Confluent Cloud)
  • Weiterentwicklung einer Streamlit UI Anwendung zur Anzeige der Metadaten
  • Bereitstellung einer Jupyter-Lab Umgebung in einem Docker Container on Premises

Kafka DuckDB Confluent Cloud DB/2 Postgres
Python SQL Docker Kafka Linux Big Data Dask Pandas Parquet Streamlit Data Engineer Jupyter Notebooks Atlassian JIRA Atlassian Confluence
GELITA
Remote
4 Monate
2023-05 - 2023-08

Datenintegration

Data Engineer Azure azure functions python ...
Data Engineer
  • Integration des CRM Tool Hubspot mit dem (on Premises) ERP System Alphaplan
  • Entwicklung eines Kafka Producer Client für jede Entität (Contact, Company) in Azure function mit einem Timer Trigger um die Deltas aus Hubspot zu lesen und in die entsprechende Kafka Topic zu schreiben
  • Entwicklung eines Kafka Consumer Client für jede Entität (Contact, Company) on Premises um die Einträge aus der Kafka Topic in die entsprechende Tabelle (Ansprechpartner, Adresse) zu schreiben
  • Automatisierung und Optimierung der Datenpflege und der User Experience für die CRM Datenerfassung
Azure hubspot
Azure azure functions python sql kafka
Remote
1 Jahr 1 Monat
2022-04 - 2023-04

Deutscher Konzern für Konsumgüter, Düsseldorf / Remote

Data Engineer Python Pyspark SQL ...
Data Engineer

  • Analyse und Behebung von Fehlern in Pyspark und Machine Learn-ing Applikationen 
  • Stabilisierung der Use Cases durch die Implementierung von Monitoring Modulen 
  • Technische Implementierung der Änderungsanfragen und Deploy-ment mittels Azure Devops 
  • Migration von Datenverarbeitungsstrecken von Dremio auf Data-bricks 
  • Ansprechpartner für den Support verschiedener Use Cases 
  • MS Azure Technology Stack 
  • Databricks, Data Factory, Linux VM, Azure Devops 
  • Python, Pyspark, SQL, Linux 

Data Factory Linux VM Azure Devops Python Azure MS Azure Technology Stack Kafka
Python Pyspark SQL Linux Databricks Data Factory
Deutscher Konzern für Konsumgüter
Düsseldorf
10 Monate
2021-07 - 2022-04

Deutscher Konzern für Konsumgüter, Düsseldorf

Data Engineer Python Pyspark SQL
Data Engineer

  • Analyse und Dokumentation der Use Cases in Abstimmung mit dem Kunden
  • Migration und Deployment von Azure Ressourcen (Data Factory, Databricks, Key Vault) 
  • Bearbeitung von Python Skripten von Data Lake Gen1 und Data Lake Gen2 API
  • Deren Deployment auf virtuellen Maschinen mit An-passung der Packages
  • Entwicklung von Datenpipelines mittels Data Factory und Data-bricks 

MS Azure Technology Stack Databricks Data Factory Linux VM Azure Devops
Python Pyspark SQL
Deutscher Konzern für Konsumgüter
Düsseldorf
2 Jahre
2018-05 - 2020-04

Huf Group, Velbert - Automobilzulieferer, Düsseldorf

Component Test Engineer Requirements Engineering Qualitätssicherung
Component Test Engineer

  • Requirements Engineering, Ableitung von Testfällen
  • Abstimmung der Tests mit Kunden, Entwicklern und Zulieferern
  • Auswertung von Testdaten 

IBM DOORS
Requirements Engineering Qualitätssicherung
Huf Group, Velbert
Düsseldorf

Aus- und Weiterbildung

Aus- und Weiterbildung

1 Monat
2024-06 - 2024-06

Azure Data Engineer Associate

Zertifikat, Microsoft
Zertifikat
Microsoft
1 Monat
2022-10 - 2022-10

AWS Machine Learning Speacialty

Zertifikat, AWS
Zertifikat
AWS
1 Monat
2022-05 - 2022-05

Deep Learning Specialisation, DeepLearning.AI

Zertifikat, DeepLearning.AI
Zertifikat
DeepLearning.AI
3 Monate
2020-06 - 2020-08

Data Science Bootcamp

Spiced Academy, Köln
Spiced Academy, Köln
Python, Pandas, Numpy, Sklearn, Docker, AWS
1 Monat
2018-11 - 2018-11

Requirements Engineering, IREB-CPRE, Foundation Level

Zertifikat, IREB
Zertifikat
IREB
2 Jahre 1 Monat
2014-09 - 2016-09

Master of Science Elektrotechnik

Master of Science Elektrotechnik,
Master of Science Elektrotechnik

Energiesystemtechnik 

3 Jahre 11 Monate
2009-09 - 2013-07

Angewandte Physik

Bachlor,
Bachlor
Instrumentierung und physikalische Messungen

Position

Position

  • Data Engineer
  • Beratung / Consulting

Kompetenzen

Kompetenzen

Programmiersprachen

Azure, Data Engineering

Data Engineering 

» Python, Pyspark, SQL, Linux

» Snowflake, dbt

» Docker

» Microsoft Azure Technology Stack: Azure Data Lake Gen2, Databricks, Data Factory, Azure VM, Azure Devops, Azure Functions

» Migration von Daten und Applikationen 

» Entwicklung von Datenpipelines 

» Orchestration mittels Azure Data Factory 

» Monitoring von Machine Learning und Big Data Applikationen 

Machine Learning 

» Python, Pandas, Numpy, Matplotlib, Sklearn, XGboost, Tensor-flow, AWS Sagemaker 

» Exploratory Data Analysis 

» Data Preprocessing, Feature Engineering 

» Deployment mittels Docker, Flask, BentoML 

» Cloud Deployment mittels AWS Lambda 

Branchen

Branchen

  • Automobilzulieferer
  • Konsumgüter
  • Lebensmittel
  • Maschinenbau
  • Forschung & Entwicklung

Vertrauen Sie auf Randstad

Im Bereich Freelancing
Im Bereich Arbeitnehmerüberlassung / Personalvermittlung

Fragen?

Rufen Sie uns an +49 89 500316-300 oder schreiben Sie uns:

Das Freelancer-Portal

Direktester geht's nicht! Ganz einfach Freelancer finden und direkt Kontakt aufnehmen.