Jonas Lindner
Senior Data Engineer
Profil
Data Engineer mit 6 Jahren Erfahrung in der Konzeption und dem Betrieb robuster Daten-Pipelines für Analytics und BI. Verarbeitete mit Apache Spark, Kafka und Snowflake täglich mehr als 5 Terabyte Daten und senkte die Warehouse-Compute-Kosten um 34 %.
Berufserfahrung
- Entwickelte skalierbare Streaming-Pipelines mit Kafka und Apache Spark zur Echtzeitverarbeitung von 12.000 Events/Sekunde bei unter 500 ms Latenz.
- Migrierte ein Legacy-Data-Warehouse auf Snowflake und dbt; reduzierte Pipeline-Laufzeiten von 6 Stunden auf 35 Minuten und sicherte 99,95 % Datenverfügbarkeit.
- Implementierte automatisierte Datenqualitätstests mit Great Expectations; senkte Datenfehler im Reporting um 82 %.
- Erstellte 30+ Batch-ETL-Pipelines mit Python und Apache Airflow für das Marketing- und Vertriebs-Reporting über 1,8 TB Kundendaten.
- Optimierte Partitionierungs- und Clustering-Strategien in PostgreSQL und BigQuery, wodurch Abfragezeiten um 46 % sanken.
