a Randstad company

Data-Engineer, Beratung, Analyse, Regelbetrieb und Entwicklung (DevOps), Hadoop / Big Data, Kafka, nifi, Spark, Container, Python

Profil
Top-Skills
Container Big Data Workflow Java Python Git JavaScript Perl Apache Shell Programmierung NodeJS Administration Linux Docker Gentoo CentOS Container Hive Apache Airflow Nifi Data Engineering Kafka Big Data Workflow Apache Spark
Verfügbar ab
18.12.2022
Aktuell verfügbar - Der Experte steht für neue Projektangebote zur Verfügung.
Verfügbar zu
90%
davon vor Ort
5%
Einsatzorte

Städte
Hamburg (+200km)
PLZ-Gebiete
Länder
Deutschland
Remote-Arbeit
möglich
Art des Profiles
Freiberufler / Selbstständiger
Der Experte ist als Einzelperson freiberuflich oder selbstständig tätig.

1 Jahr 11 Monate

2021-01

heute

Big Data Workflow

Data Engineer Hadoop Airflow nifi ...
Rolle
Data Engineer
Projektinhalte

Optimierung des Elemente eines Big Data Workflows

Produkte
Kafka HDFS Hadoop Hive Spark Python Apache Airflow Kafka Connect Apache Spark
Kenntnisse
Hadoop Airflow nifi Kafka Python Hive Apache Spark
Einsatzort
remote
2 Jahre 7 Monate

2020-05

heute

Ausbau einer private Cloud

Berater, Entwickler DevOps agile Projectmanagement OpenStack ...
Rolle
Berater, Entwickler
Projektinhalte

- Bereitstellung von individualisierten Images

- Aufbau einer CI/CD-Pipeline

- Erstellung eines Konzepts zum Rolling-Update

- Schnittstellen zu Kubernetes

- Erstellung eines Storage-Konzepts

- Aufbau eine zentralen Monitorings

- Einführung agiler Methoden (Scrum) in den Regelbetrieb

Produkte
OpenStack Kubernetes
Kenntnisse
DevOps agile Projectmanagement OpenStack Linux Administration
3 Jahre 7 Monate

2019-05

heute

Regelbetrieb und Ausbau einer Abrechnungsplattform

Berater, Entwickler Linux Administration Node.js MongoDB ...
Rolle
Berater, Entwickler
Projektinhalte

Beratung und Umsetzung bei der Optimierung der Abläufe, Bereitstellung eines Webfrontends, Datenspeicherung und Archivierung, Abrechnungsprozesse auf Basis von EDIFACT und Sepa.xml.

Produkte
Nodejs mongodb Docker
Kenntnisse
Linux Administration Node.js MongoDB Docker
6 Jahre 11 Monate

2016-01

heute

Betreuung einer Nachmittags-AG "Programmieren" für Schüler der Jg. 5/6

Betreuer
Rolle
Betreuer
Einsatzort
Hamburg
16 Jahre 11 Monate

2006-01

heute

Suchmaschinen / Meta-Suchmaschinen

Hadoop Apache Solr
Projektinhalte

Entwicklung und Betreuung verschiedener (Mini-)Suchmaschinen und Meta-Suchmaschinen

Produkte
Apache Hadoop Nutch Solr
Kenntnisse
Hadoop Apache Solr
Kunde
SuMa-eV
17 Jahre 11 Monate

2005-01

heute

Betrieb von Kundenapplikationen

Linux Administration PostgreSQL Python ...
Projektinhalte

Aufbau und Betreuung von Kundensystemen und Fremdapplikationen (Gentoo, Solaris, Apache, Drupal, Postgres, Solr, Tomcat, Perl, Python, Java, PHP, Wordpress).

Produkte
Gentoo Solaris Apache Drupal Postgres Solr Tomcat Perl Python Java PHP Wordpress
Kenntnisse
Linux Administration PostgreSQL Python Apache Solr Java Gentoo
5 Monate

2020-01

2020-05

Bereitstellung private Cloud (beta-Level, Openstack)

Planung und Installation Administration Linux OpenStack
Rolle
Planung und Installation
Projektinhalte

- Transparente Firewall (Linux)

- CentOS-Server in zwei Regionen

- Openstack

- Optimierung des Managements per Ansible

Produkte
OpenStack CentOS iptables
Kenntnisse
Administration Linux OpenStack
Einsatzort
Hamburg
1 Jahr

2019-01

2019-12

Spezifikation und Aufbau einer privaten Cloud (Openstack, Kubernetes)

Berater, Analyst, Administration, Entwicklung Container Glusterfs OpenStack ...
Rolle
Berater, Analyst, Administration, Entwicklung
Projektinhalte

Spezifikation und Implementierung einer privaten Cloud-Plattform inkl. Monitoring und Automatisierung der Prozesse für einen Managed-Hosting-Anbieter (Kubernetes, Docker, Glusterfs, Virtualbox, Gentoo-Linux, Openstack)

Produkte
Docker Glusterfs OpenStack Kubernetes
Kenntnisse
Container Glusterfs OpenStack Kubernetes
Einsatzort
Hamburg
3 Jahre 2 Monate

2016-05

2019-06

Betrieb und Modernisierung von legacy Reportinglösungen

Beratung, Software-Entwicklung Python MongoDB LaTeX
Rolle
Beratung, Software-Entwicklung
Projektinhalte

- Übernahme der Bestandssoftware

- Konsolidierung der Software

- Automatisierung der Abläufe

- Migration auf aktuelle Linux-Systeme

Produkte
Python LaTeX MongoDB Administration Linux
Kenntnisse
Python MongoDB LaTeX
Einsatzort
Hamburg
2 Monate

2018-11

2018-12

Verbesserung der Suchfunktion eines Webshops

Entwickler Container
Rolle
Entwickler
Projektinhalte

Migration einer Mysql-Suche auf einen Suchservice mit Apache-Solr. Bereitstellung eines Docker-Containers, Import der Daten und eines Demonstrators für die Suchfunktion (jquery).

Produkte
Apache Solr jQuery Mysql Docker
Kenntnisse
Container
Einsatzort
Hamburg
2 Monate

2018-10

2018-11

Aufbau einer Docker/Kubernets Plattform

Docker
Projektinhalte

Einführung von Docker und Kubernets in einem professionellen Datacenter-Umfeld.

Produkte
Docker Kubernets
Kenntnisse
Docker
Einsatzort
Hamburg
6 Monate

2018-05

2018-10

Beratung beim Aufbau eines Backoffice-Werzeugs

Berater Node.js
Rolle
Berater
Projektinhalte

Demonstrator erstellen

Anforderungen in Arbeitspakete überführen

Aufwandsabschätzung

Produkte
jQuery Node.js MongoDB
Kenntnisse
Node.js
Einsatzort
Hamburg
1 Jahr 2 Monate

2017-05

2018-06

Aufbau einer Reporting und Abrechnungsplattform im Gesundheitsbereich

Berater und Software-Entwickler MongoDB Node.js
Rolle
Berater und Software-Entwickler
Projektinhalte

- Überführung der vertraglichen Anforderungen in Arbeitspakete

- Entwicklung eines Systems zur Mandantisierung und Benutzerverwaltung

- Aufbau der Reporting-Lösung

- Kunden und Projekt-Kommunikation

- Anbindung der Abrechnungsschnittstellen

Produkte
NodeJS MongoDB Apache mod_security SEPA EDIFACT
Kenntnisse
MongoDB Node.js
Einsatzort
Hamburg
4 Jahre 2 Monate

2013-01

2017-02

Entwicklung einer Applikation zum Datenaustausch und eines Workflows zur Datenanreicherung von Produktdaten

Konzeptionierung und Umsetzung Node.js
Produkte
mongodb JavaScript node.js
Kenntnisse
Konzeptionierung und Umsetzung Node.js
9 Jahre 6 Monate

2007-01

2016-06

Massendatenverarbeitung mit Hadoop

Hadoop Hive Java
Projektinhalte

Aufbau und Betrieb eines Hadoop-Clusters mit Internet-Crawler, wöchentlichen Massendatenauswertungen, individuelle Parser und Export Applikation

Produkte
Nutch Hive Solr Java Hadoop
Kenntnisse
Hadoop Hive Java
3 Jahre 2 Monate

2012-01

2015-02

Crawlen von Massendaten

Hadoop Apache Solr Java
Projektinhalte

Apache Hadoop, Nutch, ca. vierzig Server, 1 Mrd. Webseiten/Monat, individuelle Parser und Export Applikationen, Java, CentOS

Produkte
Hadoop Nutch Apache Solr Tika
Kenntnisse
Hadoop Apache Solr Java
Einsatzort
remote
2 Jahre 3 Monate

2009-04

2011-06

Referent im Rahmen eines befristeten Projekts zur internetbasierten Früherkennung von Ereignissen

Hadoop Apache Solr Java
Projektinhalte

Referent im Rahmen eines befristeten Projekts zur internetbasierten Früherkennung von Ereignissen (Analyse, Programmierung eines Demonstrators, Auswertung und Interpretation).
Zusätzlich Konsolidierung und Ausbau der Suchmaschine ?clewwa.de? (u.a. Umstellung auf Apache Hadoop).

Kenntnisse
Hadoop Apache Solr Java
Kunde
Bundesamt für Verbraucherschutz und Lebensmittelsicherheit, Berlin
3 Jahre 6 Monate

2006-01

2009-06

Entwicklung, Betreuung und Pflege von Internetsuchmaschinen

Linux Administration Perl Java
Projektinhalte

Wissenschaftlicher Mitarbeiter. Entwicklung, Betreuung und Pflege von Internetsuchmaschinen, insbes. [Name auf Anfrage], ?clewwa.de?, Abschluss des Projekts ?Forschungsportal.net?

Kenntnisse
Linux Administration Perl Java
Kunde
Regionales Rechenzentrum für Niedersachsen (RRZN), Hannover
1 Jahr

2006-01

2006-12

Erstellung Backup-Konzept für SLES9/Oracle 10g Server

5 Jahre 3 Monate

1999-10

2004-12

Aufbau des Unternehmens einschließlich der RZ-Infrastruktur

Linux Administration Planung Mitarbeiterführung
Projektinhalte

01/2005 ? 03/2005 Übergabe
Abschluss der Kundenprojekte, Übergabe der Geschäftsführung

01/2000 ? 12/2004 Geschäftsführer Technik
Aufbau des Unternehmens einschließlich der RZ-Infrastruktur, Betreuung komplexer Kundenprojekte, Aufbau einer Datawarehouse Applikation zur Nutzungsprofilanalyse von verteilten Websites (Oracle 8i, CORBA, C++, Java).

10/1999 ? 12/1999 Unternehmensplanung
Marktuntersuchung, Produktdefinition, Erstellung Geschäftsplanung

Kenntnisse
Linux Administration Planung Mitarbeiterführung
Kunde
Intares GmbH, Hamburg
3 Jahre 6 Monate

1996-04

1999-09

Technische Betreuung der Top 10 Kunden, Technische Vertriebsunterstützung

Linux Administration Vertriebsassistenz Mitarbeiterführung
Projektinhalte

07/1998 ? 09/1999 Stellvertretender Abteilungsleiter ?Internet Operations Center? Technische Betreuung der Top 10 Kunden, Technische Vertriebsunterstützung, Betreuung von Schlüsselkunden, Regelbetrieb der UNIX-Systeme

07/1997 ? 06/1998 Gruppenleiter ?Service- und Systemadministration?
Betreuung von Schlüsselkunden, Leitung interner Projekte, Organisation des 24x7 Betriebs der Server

04/1996 ? 06/1997 Technischer Spezialist für Unix-Systeme und Internet-Dienst Schulung und Support der Kunden, technischer Aufbau zentraler Dienste

Kenntnisse
Linux Administration Vertriebsassistenz Mitarbeiterführung
Kunde
IS Internet Services GmbH & Co., Hamburg
1 Jahr 8 Monate

1994-08

1996-03

Freiberufliche Tätigkeit als UNIX-Spezialist für die MAZ Hamburg GmbH (später als IS Internet Services GmbH & Co. ausgegründet)

Linux Administration
Kenntnisse
Linux Administration
Kunde
MAZ Hamburg GmbH, Hamburg

06/1996 Abschluss Universität Hannover, Diplom-Ingenieur Elektrotechnik

02/1991 ? 12/1995 Regionales Rechenzentrum für Niedersachsen, Hannover
Wissenschaftlicher Hilfsassistent (Laborbetreuung, Dozent, Systemadministration)

Sonstige Aktivitäten

  • Nachmittags-AG ?Programmieren mit Scratch? am Albrecht-Thaer-Gymnasium
  • Minderheitsgesellschafter der Intares GmbH

Deutsch Muttersprache
Englisch Verhandlungssicher

Top Skills
Container Big Data Workflow Java Python Git JavaScript Perl Apache Shell Programmierung NodeJS Administration Linux Docker Gentoo CentOS Container Hive Apache Airflow Nifi Data Engineering Kafka Big Data Workflow Apache Spark
Schwerpunkte
Aufbau und Konsolidierung laufender Systeme Hadoop Kubernetes Openstack Regelbetrieb von Servern und Anwendungen Volltextsuche
Aufgabenbereiche
agile Projectmanagement Konzeptionierung und Umsetzung System-Architektur
Produkte / Standards / Erfahrungen / Methoden
Administration Linux Apache Apache Hadoop Apache Solr Apache Tomcat Container DevOps Drupal Frontend Hadoop HDFS Hive Kafka Kubernetes LaTex mod_security NodeJS Nutch OpenStack Orchestration Scrum SEPA Solr Spark System-Architektur Virtualisierung Apache Airflow Kafka Connect
Betriebssysteme
CentOS Debian Docker Gentoo Glusterfs Kubernetes Linux podman Solaris
Programmiersprachen
Bash Shell C Java JavaScript node.js Perl PHP
Grundlagen
Python
Datenbanken
MongoDB MySQL PostgreSQL
Datenkommunikation
EDIFACT
Ihr Kontakt zu Gulp

Fragen? Rufen Sie uns an +49 89 500316-300 oder schreiben Sie uns:

Jetzt bei GULP Direkt registrieren und Freelancer kontaktieren