J
Posted 9mo ago•Bonn
Data Engineer – Schwerpunkt Programmierung & Datenpipelines*
MiddleOn-site (Bonn)€5,000 – €6,700 / mo
Required Skills
PythonSQLCI/CDSnowflakeDatabricksApache Spark
Job Description
Was dich erwartet
Du liebst es, Daten zum Fließen zu bringen, große Datenmengen performant zu verarbeiten und saubere Pipelines zu bauen? Dein Schwerpunkt liegt klar auf Entwicklung und Datenverarbeitung? Dann bist du hier richtig.- Du arbeitest im Consulting-Umfeld und entwickelst für unterschiedliche Kunden immer wieder neue, abwechslungsreiche Datenlösungen.
- Du entwickelst skalierbare ETL/ELT-Datenpipelines für Batch- und Streaming-Verarbeitung und arbeitest mit Spark / PySpark, Python und SQL.
- Du implementierst Datenmodelle nach Kimball, Data Vault oder Lakehouse-Prinzipien.
- Du transformierst, normalisierst und denormalisierst Daten aus verschiedenen Quellsystemen.
- Du orchestrierst Datenpipelines mit Airflow oder vergleichbaren Tools und arbeitest mit Databricks, Snowflake oder ähnlichen Plattformen.
- Du unterstützt Datenanalyse- und Machine-Learning-Pipelines.
- Du sorgst für Qualität durch Testing, Dokumentation und CI/CD.
Was du mitbringst
- Du bringst mehrjährige Berufserfahrung in den oben genannten Themen mit und hast sehr gute SQL-Kenntnisse sowie sehr gute Kenntnisse in Spark / PySpark.
- Du arbeitest sicher mit Python, hast Erfahrung mit dbt und Airflow oder vergleichbaren Orchestrierungstools.
- Du bist sicher im Umgang mit Snowflake und/oder Databricks und erfahren in Datenmodellierung (dimensionale Modellierung,
Ready to apply? Optimize your CV for this specific jobAI customizes your experience bullets and increases chances to get hired.