Jetzt bewerben: Senior Data Engineer (all genders) bei diconium group in Berlin – Top Job

Berlin

• Du entwirfst und entwickelst skalierbare Data Pipelines, um große Mengen an Daten effizient zu verarbeiten und zu analysieren.
• Du bewertest und implementierst neue Technologien und Tools im Bereich Data Engineering, um die Effizienz und Leistung unserer Datenverarbeitungsprozesse kontinuierlich zu verbessern.
• Du unterstützt unsere Kunden bei der einfachen und transparenten Beschaffung der notwendigen Daten, um intelligente Data-Produkte in verschiedenen Bereichen (Mobilität, Automobil, Industrie, Consumer, Finanzwesen und Non-Profit-Organisationen) zu entwickeln.
• Du arbeitest eng mit Data Scientists und Analysten zusammen, identifizierst potenzielle Datenquellen und evaluierst deren Nutzen, um die Anforderungen an die Daten zu verstehen und geeignete Lösungen zu entwickeln.
• Du teilst dein Fachwissen und deine Erfahrungen mit anderen Teammitgliedern, trägst zum Wissensaustausch und zur Weiterentwicklung des Teams bei und übernimmst eine fachliche Führungsrolle innerhalb des Teams.
• Du entwickelst und pflegst Dokumentationen zu Data Engineering-Prozessen, Best Practices und Technologien.

Must haves:

• Relevante Berufserfahrung von mindestens 5 Jahren im Bereich Data Engineering
• Fundierte Kenntnisse in mindestens einer Programmiersprache (wie Python, Java oder Scala) und Erfahrung mit Big Data Technologien (wie Hadoop, Spark oder Kafka)
• Fundierte Kenntnisse in Batch- und Real-Time Data Processing Frameworks wie z.B. Apache Spark, Apache Flink oder Ähnlichen
• Praktische Erfahrung mit Cloud-basierten Datenplattformen (Azure, AWS oder GCP), Verständnis von Datenmodellierung & Datenarchitektur und Erfahrung mit Databricks
• Erfahrung in der fachlichen Führung und der Beratung von Kunden zu technischen Konzepten

Nice to have:

• Kenntnisse in der Entwicklung von Machine Learning Pipelines und Modellen
• Erfahrung im Projektmanagement mit agilen Methoden wie SAFe, Scrum oder Kanban
• Vertrautheit mit DataOps-Praktiken und DevOps-Konzepten
• Erfahrung in der Implementierung von Data Quality- und Data Governance-Frameworks

diconium auf einen Blick