# Lukas Hoffmann

Headline: Senior Data Engineer – Cloud & Big Data

- Email: lukas.hoffmann@example.de
- Phone: +49 30 12345678
- URL: https://www.lukashoffmann.de

Ort: Friedrichstraße 123, Berlin, Berlin, Deutschland, 10117

Profile: 
- GitHub: [@lukashoffmann](https://github.com/lukashoffmann)
- LinkedIn: [@lukashoffmann](https://www.linkedin.com/in/lukashoffmann)

## Basisinformationen

- Data Engineer mit über 6 Jahren Erfahrung in der Konzeption, Entwicklung und dem Betrieb skalierbarer Datenpipelines
- Spezialisiert auf Cloud-Datenplattformen (AWS, GCP), ETL-Prozesse und die Modellierung von Data-Warehouse-Strukturen
- Fundierte Kenntnisse in Python, SQL, Apache Spark, Kafka und Airflow sowie in der Automatisierung von Datenqualitätsprüfungen
- Teamorientiert, analytisch denkend und leidenschaftlich für saubere, wartbare und performante Datenarchitekturen


## Ausbildung

### Technische Universität München

Master, Informatik, Punkte: 1.3, Okt. 2014–Sept. 2017

URL: https://www.tum.de

Kurse: Datenbanksysteme, Verteilte Systeme, Maschinelles Lernen, Big Data Analytics, Datenstromverarbeitung, Cloud Computing, Software Engineering

Summary: 
- Schwerpunkt auf Datenbanken, verteilten Systemen und Big-Data-Technologien
- Masterarbeit: „Entwurf einer skalierbaren Echtzeit-Datenpipeline für IoT-Anwendungen“
- Praktische Erfahrung durch Projekte in Kooperation mit Industriepartnern


### Universität Hamburg

Bachelor, Wirtschaftsinformatik, Punkte: 1.7, Okt. 2011–Sept. 2014

URL: https://www.uni-hamburg.de

Kurse: Programmierung, Datenbanken, Betriebswirtschaftslehre, Statistik, Informationssysteme

Summary: 
- Grundlagen in Programmierung, Datenbanken und betriebswirtschaftlicher Informatik
- Bachelorarbeit: „Vergleich von ETL-Werkzeugen für heterogene Datenquellen“
- Mitglied der Fachschaft Informatik und Organisation von Workshops zu SQL


## Berufserfahrung

### Senior Data Engineer

DataCraft GmbH, Jan. 2020–Heute

URL: https://www.datacraft.de

Schlüsselwörter: Datenpipelines, ETL, AWS, Apache Spark, Airflow, Data Warehouse

Summary: 
- Leitung eines Teams von vier Data Engineers bei der Migration einer monolithischen Datenplattform in eine Cloud-native Architektur auf AWS
- Konzeption und Implementierung von ETL-Pipelines mit Apache Airflow, Spark und dbt zur Verarbeitung von über 5 TB täglich
- Einführung automatisierter Datenqualitätsprüfungen und Monitoring-Dashboards zur Sicherstellung der Datenintegrität
- Enge Zusammenarbeit mit Data Scientists, Analytics-Teams und Stakeholdern zur Ableitung datengetriebener Entscheidungen
- Mentoring von Junior-Engineers und Förderung von Best Practices in den Bereichen Code-Qualität und Dokumentation


### Data Engineer

CloudMetrics AG, Okt. 2017–Dez. 2019

URL: https://www.cloudmetrics.de

Schlüsselwörter: Python, SQL, Kafka, BigQuery, GCP, Terraform

Summary: 
- Entwicklung und Wartung von Batch- und Streaming-Pipelines mit Python, SQL und Apache Kafka
- Aufbau eines Data Warehouse auf Google BigQuery inklusive Datenmodellierung und Performance-Optimierung
- Automatisierung von Deployments mit Docker, Kubernetes und Terraform
- Durchführung von Datenanalysen und Erstellung von Reports für das Management


## Sprachen

- Deutsch: Muttersprache oder zweisprachig, Schlüsselwörter: Muttersprache
- Englisch: Verhandlungssichere Kenntnisse, Schlüsselwörter: C1, Business fluent

## Fähigkeiten

- Programmierung & Datenbanken: Experte, Schlüsselwörter: Python, SQL, Scala, PostgreSQL, MongoDB, Redis
- Big Data & Streaming: Erfahren, Schlüsselwörter: Apache Spark, Apache Kafka, Apache Flink, Hadoop, Pandas
- Cloud & DevOps: Erfahren, Schlüsselwörter: AWS, GCP, Docker, Kubernetes, Terraform, Airflow
- Data Warehousing & BI: Erfahren, Schlüsselwörter: Snowflake, BigQuery, Redshift, dbt, Tableau, Power BI

## Auszeichnungen

### Mitarbeiter des Jahres – Data Engineering

DataCraft GmbH, Dez. 2023

Summary: 
Ausgezeichnet für die erfolgreiche Migration der Datenplattform in die AWS-Cloud und die Einführung automatisierter Datenqualitätsprüfungen.


## Zertifikate

### AWS Certified Data Analytics – Specialty

Amazon Web Services, Mai 2022

URL: https://aws.amazon.com/certification/
### Google Cloud Professional Data Engineer

Google Cloud, Aug. 2021

URL: https://cloud.google.com/certification/data-engineer

## Veröffentlichungen

### Skalierbare Echtzeit-Datenpipelines mit Kafka und Spark

Datenbank-Spektrum, Nov. 2021

URL: https://link.springer.com/journal/13222

Summary: 
Fachartikel über Architekturmuster und Betriebserfahrungen mit Streaming-Datenpipelines in der Cloud.


## Projekte

### Echtzeit-Analyseplattform für IoT-Daten

Aufbau einer skalierbaren Streaming-Plattform zur Verarbeitung von Sensordaten in Echtzeit., März 2022–Juni 2023

URL: https://github.com/lukashoffmann/iot-analytics

Schlüsselwörter: IoT, Kafka, Spark, AWS, Echtzeit

Summary: 
- Architektur und Implementierung einer Echtzeit-Pipeline mit Kafka, Spark Structured Streaming und AWS Kinesis
- Verarbeitung von ca. 10.000 Ereignissen pro Sekunde mit Sub-Sekunden-Latenz
- Aufbau eines Dashboards zur Visualisierung von Anomalien und Betriebskennzahlen


### Open-Source Data Quality Framework

Entwicklung eines Python-Frameworks zur automatisierten Datenqualitätsprüfung in ETL-Pipelines., Jan. 2021–Heute

URL: https://github.com/lukashoffmann/dq-framework

Schlüsselwörter: Python, Data Quality, Open Source, Airflow

Summary: 
- Open-Source-Bibliothek zur Definition und Ausführung von Datenqualitätsregeln in Python
- Integration in Airflow und dbt zur automatischen Validierung von Pipeline-Ergebnissen
- Über 200 Sterne auf GitHub und Nutzung durch mehrere Unternehmen


## Interessen

- Open Source: Apache Spark, Airflow, dbt
- Sport: Laufen, Radfahren, Wandern

## Ehrenamtliche Tätigkeiten

### Data Literacy e.V.

Dozent für Datenanalyse, Sept. 2020–Heute

URL: https://www.data-literacy.de

Summary: 
- Durchführung von Workshops zu SQL und Python für Mitarbeitende von Non-Profit-Organisationen
- Entwicklung von Lehrmaterialien und Übungsprojekten zur Datenanalyse
- Beratung von Vereinen bei der Auswahl und Einrichtung von Datenbanken
