Data Engineer in CommTech (m/w/d) (befr. 2 Jahre)
Nürnberg Virnsberger Str. 63, Germany
DATEV eG
Professional support for tax consultancy, auditing, companies, legal advice and the public sector.Willkommen im CommTech-Team bei DATEV! Unser Team besteht aus Daten-Expert:innen im Bereich Kommunikation und Marketing. Hier arbeitest Du in einem modernen und kreativen Umfeld, das durch offene Kommunikation und Zusammenarbeit geprägt ist. Wir legen großen Wert auf Innovation und fördern aktiv den Austausch von Ideen. Unsere Projekte bieten Dir die Möglichkeit, an spannenden und zukunftsweisenden Themen im Bereich CommTech, Data Engineering und Data Analytics zu arbeiten. Dabei unterstützen wir Deine persönliche und berufliche Weiterentwicklung durch maßgeschneiderte Trainings und Weiterbildungen. Werde Teil eines Teams, das mit Leidenschaft und Freude daran arbeitet, die datengetriebene Zukunft von DATEV mitzugestalten.
Das sind die Aufgaben:
- Design und Implementierung von skalierbaren Datenpipelines auf der Databricks-Plattform und Anbindung externer Datenquellen an unsere Azure-Cloud-Datenbank
- Entwicklung und Wartung von ELT-Prozessen unter Nutzung von (Py)Spark
- Entwicklung und Integration von Integration und Verarbeitung von Daten aus verschiedenen Quellen, einschließlich der Implementierung von Delta Lake für die Speicherung und Verwaltung von Daten
- Erstellung und Optimierung von SQL-Abfragen für die Datenanalyse und -transformation
- Sicherstellung der Datenqualität und Implementierung von Datenvalidierungsprozessen sowie Monitoring, Fehlerbehebung und kontinuierliche Verbesserung bestehender Datenpipelines
- Automatisierung und Optimierung von Datenverarbeitungsprozessen, um Effizienz und Skalierbarkeit zu gewährleisten.
- Erstellung und Pflege von Dokumentationen zu entwickelten Pipelines und Datenprozessen.
Erforderliche Skills:
- Abgeschlossenes Studium der Informatik, Informationstechnologie oder eines verwandten Fachgebiets
- Kenntnisse in Databricks und der Nutzung von Spark für die Datenverarbeitung
- Programmierkenntnisse in Python
- Erfahrungen mit Azure-Cloud-Datenbank
- Erfahrung mit SQL und der Optimierung von SQL-Abfragen
- Erfahrung in der Entwicklung von APIs und der Integration verschiedener Datenquellen
- Erste Kenntnisse in der Datenmodellierung und Datenarchitektur
- Ausgeprägte analytische und problemlösungsorientierte Denkweise
- Teamfähigkeit und gute Kommunikationsfähigkeiten
- Gute Deutsch- und Englischkenntnisse in Wort und Schrift
- Verlässlichkeit und ein hohes Qualitätsbewusstsein sowie ein strukturiertes und analytisches Vorgehen.
Erlernbare Skills:
- Erste Kenntnisse in der Datenmodellierung und Datenarchitektur
- Möglichkeit zur Arbeit im "Homeoffice" im Sinne einer mobilen, ortsunabhängigen Tätigkeit innerhalb Deutschlands inkl. der dazugehörigen technischen Ausstattung
- Flexible Arbeitszeit inkl. der Möglichkeit zum Freizeitausgleich für eine gute Work-Life-Balance
- Faire und transparente Entlohnung, 13. Monatsgehalt, Urlaubsgeld sowie viele weitere finanzielle Anreize
- und vieles mehr…
Kontakt:
Andrea KleinleinTelefon:
+49 (911) 31942402E-Mail:
* Salary range is an estimate based on our AI, ML, Data Science Salary Index 💰
Tags: APIs Azure Computer Science Data Analytics Databricks ELT Engineering Pipelines Python Spark SQL
More jobs like this
Explore more career opportunities
Find even more open roles below ordered by popularity of job title or skills/products/technologies used.