Data Engineer (m/w/d) mit Fokus auf Databricks und modernen Datenarchitekturen

Deine Aufgaben

• Zusammenarbeit mit Data Scientists und Data Analysten zur Bereitstellung von Datenlösungen für analytische und maschinelle Anwendungen.
• Entwicklung und Optimierung von Datenpipelines und MLOps Workflows mit Databricks und anderen Technologien auf der Azure Cloud Platform.
• Integration von Datenquellen und Verarbeitung großer Datenmengen aus strukturierten und unstrukturierten Quellen.
• Aufbau und Betrieb moderner, skalierbarer Datenarchitekturen für Echtzeit- und Batch-Verarbeitung.
• Implementierung und Betreuung von Streaming-Anwendungen mit Technologien wie Flink, Spark Streaming oder Kafka Streams.
• Sicherstellung von Datenqualität, Sicherheit und Performance in komplexen Datenlandschaften.
  Monitoring, Debugging und Optimierung der bestehenden Dateninfrastruktur.

Dein Profil

• Abgeschlossenes Studium in Informatik, Data Science, Ingenieurwissenschaften oder eine vergleichbare Qualifikation.
• Mehrjährige Erfahrung in der Entwicklung von Datenpipelines und in der Arbeit mit modernen Datenarchitekturen.
• Erfahrung im Aufbau von MLOps Workflows mit Databricks für Machine Learning Projekte.
• Sehr gute Kenntnisse der Databricks Plattform (z.B. MLFlow, Assett Bundles, Unity Catalog, Delta Lake), Apache Spark, Apache Flink und Apache Kafka.
• Fundierte Programmierkenntnisse in Python, Scala oder Java, sowie ausgeprägte SQL-Fähigkeiten.
• Erfahrung mit der Azure Cloud Platform, Kenntnisse in anderen Cloud-Umgebungen (z. B. AWS, GCP) sind ein Plus.
• Idealerweise Erfahrung mit CI/CD-Pipelines, DataOps und Infrastructure-as-Code (z. B. Terraform).
• Kenntnisse in weiteren Werkzeugen und Technologien wie Airflow, Kubernetes oder Docker sind ein Plus.
• Analytisches Denkvermögen, Teamgeist und eine strukturierte, eigenverantwortliche Arbeitsweise.
• Sehr gute Deutsch- und Englischkenntnisse in Wort und Schrift.

Deine Benefits

• Marktgerechte Vergütung, flexible Arbeitszeiten, Arbeitszeitkonto und Teilzeitmodelle, für die maximale Work-Life-Balance.
• High-End-Tools deiner Wahl: iPhone, MacBook oder ThinkPad.
• Stundenkontingent innerhalb des Steadforce "Campus" und der "Center of Competence" zur freien Verfügung für deine individuelle Weiterbildung, sowie Teilnahme an Summits, Konferenzen etc. 
• Zentrales Büro mit moderner Ausstattung und guter Verkehrsanbindung.
• Motiviertes, kollegiales und dynamisches Team, das gemeinsam an spannenden Projekten arbeitet und sich gegenseitig unterstützt.
• Eine jährliche Zuzahlung zur betrieblichen Altersvorsorge sowie eine private Unfallversicherung.
• Firmenevents, wie Jahresauftaktfeier, Kochevents, Oktoberfest usw. die das Teamgefühl stärken und für unvergessliche Momente sorgen.
• Wir sind stolz darauf, als "familienfreundliches Unternehmen" ausgezeichnet worden zu sein und unterstützen unsere Mitarbeitenden in verschiedenen Lebenssituationen wie z.B. durch unser Family Office
• Workation - arbeite aus dem EU Ausland. Sonne genießen und trotzdem mit dem Team verbunden bleiben.
• Vielfältige Zusatzleistungen on top, wie Deutschland Ticket, Urban Sports Fitnessstudio Mitgliedschaft, Edenred Wertkarte, Corporate Benefits, Job Rad, Gaming Room und vieles mehr.....