Middle Data Engineer
Kyiv, Kyiv city, Ukraine
Raiffeisen Bank Ukraine
Райффайзен Банк – найбільший український банк з іноземним капіталом. Зареєстрований 27 березня 1992 року.Raiffeisen Bank is the largest Ukrainian bank with foreign capital. For over 30 years, we have been creating and developing the banking system of our country. At Raiffeisen, more than 5,500 employees work, including one of the largest product IT teams, which consists of over 800 professionals. Every day, we work hand in hand so that more than 2.7 millions of our clients can receive quality service, use the bank’s products and services, and develop their businesses because we are #Разом_з_Україною.
Your future responsibilities:
- Creation and validation of ideas for building data-driven on a domain scale
- Development of ETL data pipelines: loading from various sources, cleaning, transformation, enrichment with external data, normalization/denormalization
- Manage data ingestion, storage, and processing pipelines to ensure efficient data flow and accessibility
- Utilize Python and Scala extensively for data processing and analytics tasks
- Conduct data modeling to optimize database performance and ensure data integrity
- Implement and refactore Spark jobs to improve performance and scalability
- Develop Kafka-based solutions on Python for real-time data streaming and processing
- Create dashboards and alerts to address potential issues proactively
Your skills and experience:
- 3+ years experience in a dedicated data engineer role
- Experience working with large structured and unstructured data in various formats
- Knowledge or experience with streaming data frameworks and distributed data architectures
- Experience in building lakehouses on AWS
- Practical experience in the operation of Big Data stack: Kafka, Spark
- Experience with Python (and Scala would be a plus)
- Expert knowledge of PySpark: transformations, aggregations, window functions, writing and optimizing UDFs
- Practical Experience with RDBMS + NoSQL databases
- Development experience in Docker/Kubernetes environment
- Open and team-minded personality and communication skills
- Willingness to work in an agile environment
- Databricks experience would be a plus
We offer what matters most to you:
- Competitive salary: we guarantee a stable income and annual bonuses for your personal contribution. Additionally, we have a referral program with rewards for bringing in new colleagues to Raiffeisen Bank
- Social package: official employment, 28 days of paid leave, additional paternity leave, and financial assistance for parents with newborns
- Comfortable working conditions: possibility of a hybrid work format, offices equipped with shelters and generators, modern equipment. Classification: PUBLIC
- Wellbeing program: all employees have access to medical insurance from the first working day; consultations with a psychologist, nutritionist, or lawyer; discount programs for sports and purchases; family days for children and adults; in-office massages
- Training and development: access to over 130 online training resources; corporate training programs in CX, Data, IT Security, Leadership, Agile. Corporate library and English lessons. • Great team: our colleagues form a community where curiosity, talent, and innovation are welcome. We support each other, learn together, and grow. You can find like-minded individuals in over 15 professional communities, reading clubs, or sports clubs
- Career opportunities: we encourage advancement within the bank across functions
- Innovations and technologies: Infrastructure: AWS, Kubernetes, Docker, GitHub, GitHub actions, ArgoCD, Prometheus, Victoria, Vault, OpenTelemetry, ElasticSearch, Crossplain, Grafana. Languages: Java (main), Python (data), Go (infra, security), Swift (IOS), Kotlin (Android). Data stores: Sql-Oracle, PgSql, MsSql, Sybase. Data management: Kafka, AirFlow, Spark, Flink
- Support program for defenders: we maintain jobs and pay average wages to mobilized individuals. For veterans, we have a support program and develop the Bank’s veterans community. We work on increasing awareness among leaders and teams about the return of veterans to civilian life. Raiffeisen Bank has been recognized as one of the best employers for veterans by Forbes
Why Raiffeisen Bank?
- Our main value is people, and we support and recognize them, educate them and involve them in changes. Join Raif’s team because for us YOU matter!
- One of the largest lenders to the economy and agricultural business among private banks
- Recognized as the best employer by EY, Forbes, Randstad, Franklin Covey, and Delo.UA
- The largest humanitarian aid donor among banks (Ukrainian Red Cross, UNITED24, Superhumans, СМІЛИВІ)
- One of the largest IT product teams among the country’s banks. • One of the largest taxpayers in Ukraine; 6.6 billion UAH were paid in taxes in 2023.
Opportunities for Everyone:
- Raif is guided by principles focused on human development and the well-being of 5,500 employees and over 2.7 million clients
- At Raif, we support principles of diversity, equality, and inclusivity
- We develop programs to support defenders. You matter at Raif! Want to learn more?
You matter at Raif!
Want to learn more? Follow us on social media:
________________________________________________________________________________
Райффайзен Банк — найбільший український банк з іноземним капіталом. Більше 30 років ми створюємо та вибудовуємо банківську систему нашої держави.
У Райфі працює понад 5 500 співробітників, серед них одна із найбільших продуктових ІТ-команд, що налічує понад 800 фахівців. Щодня пліч-о-пліч ми працюємо, щоб більш ніж 2,7 мільйона наших клієнтів могли отримати якісне обслуговування, користуватися продуктами і сервісами банку, розвивати бізнес, адже ми #Разом_з_Україною.
Твої майбутні обов’язки:
- Створення та валідація ідей побудови підходів для управління даними в домені
- Розробка ETL пайплайнів: загрузка з різних ресурсів, обробка, трансформація, збагачення зовнішніми даними, нормалізація/денормалізація управлянням вхідних даних, їх зберігання для обробки даних та аналітики
- Проведення моделювання даних для оптимізації продуктивності баз даних і маштабування
- Розробка Kafka рішення на Python для потокової передачі даних у реальному часі
- Створення інформаційних панелей для сповіщення, щоб вирішувати потенційні проблеми
Твій досвід та навички:
- 3+ роки досвіду на посаді Data Engineer
- Досвід роботи з великими структурованими і неструктурованими даними в різних формах
- Досвід або знання з фраймворками потокових даних і архітектури розподілених даних
- Досвід побудови Datahouses на AWS
- Практичний досвыд зы стеком Big Data: Kafka, Spark
- Досвід роботи з Python (Scala буде перевагою)
- Експертне знання PySpark: перетворення, агрегації, віконні функції, написання та оптимізація UDF
- Практичний досвід роботи з базами даних RDBMS+NoSQL
- Досвід розробки в середовищі Docker/Kubernetes
- Досвід з Databricks буде плюсом
Пропонуємо те, що має значення саме для тебе:
- Конкурентна заробітна плата: гарантуємо стабільний дохід та річні бонуси за твій особистий внесок. Додатково, у нас діє реферальна програма винагороди за залучення нових колег до Райффайзен Банку.
- Соціальний пакет: офіційне працевлаштування, 28 днів оплачуваної відпустки, додатковий “декрет” для татусів, та матеріальна допомога для батьків при народженні дітей.
- Комфортні умови праці: можливість гібридного формату роботи, офіси забезпеченні укриттями та генераторами, забезпечення сучасною технікою.
- Wellbeing програма: для всіх співробітників доступні медичне страхування з першого робочого дня; консультації психолога, нутриціолога чи юриста; дисконт програми на спорт та покупки; family days для дітей та дорослих; масаж в офісі.
- Навчання та розвиток: доступ до понад 130 навчальних онлайн-ресурсів; корпоративні навчальні програми з CX, Data, IT Security, Лідерства, Agile. Корпоративна бібліотека та уроки англійської.
- Крута команда: наші колеги — це спільнота, де вітаються допитливість, талант та інновації. Ми підтримуємо один одного, вчимося разом та зростаємо. Ти можеш знайти однодумців у понад 15-ти професійних ком’юніті, читацькому чи спортивному клубах.
- Кар’єрні можливості: ми заохочуємо просування всередині банку між функціями.
- Інновації та технології. Infrastructure: AWS, Kubernetes, Docker, GitHub, GitHub actions, ArgoCD, Prometheus, Victoria, Vault, OpenTelemetry, ElasticSearch, Crossplain, Grafana. Languages: Java (main), Python (data), Go(infra,security), Swift (IOS), Kotlin (Andorid). Datastores: Sql-Oracle, PgSql, MsSql, Sybase. Data management: Kafka, AirFlow, Spark, Flink.
- Програма підтримки захисників і захисниць: ми зберігаємо робочі місця та виплачуємо середню заробітну плату мобілізованим. Для ветеранів та ветеранок у нас діє програма підтримки, розвивається ветеранська спільнота Банку. Ми працюємо над підвищенням обізнаності керівників та команд з питань повернення ветеранів до цивільного життя. Райффайзен Банк відзначений як один з найкращих роботодавців для ветеранів (Forbes).
Чому Райффайзен Банк?
- Наша головна цінність — люди і ми даємо їм підтримку і визнання, навчаємо, залучаємо до змін. Приєднуйся до команди Райфу, адже для нас ТИ маєш значення!
- Один із найбільших кредиторів економіки та аграрного бізнесу серед приватних банків
- Визнаний найкращим працедавцем за версіями EY, Forbes, Randstad, Franklin Covey, Delo.UA
- Найбільший донор гуманітарної допомогисеред банків (Червоний Хрест України, UNITED24, Superhumans, СМІЛИВІ)
- Один із найбільших платників податків в Україні, за 2023 рік було сплачено 6,6 млрд гривень
Можливості для всіх:
- Райф керується принципами, що фокусуються на людині та її розвитку, у центрі уваги 5 500 співробітників та понад 2,7 мільйони клієнтів
- Підтримуємо принципи різноманіття, рівності та інклюзивності
- Ми відкриті до найму ветеранів і людей з інвалідністю та готові адаптувати робоче середовище під ваші особливі потреби
- Співпрацюємо зі студентами та людьми старшого віку, створюючи умови для зростання на будь-якому етапі кар’єри
Бажаєш дізнатися більше? — Підписуйся на нас у соц.мережах:
* Salary range is an estimate based on our AI, ML, Data Science Salary Index 💰
Tags: Agile Airflow Architecture AWS Banking Big Data Classification CX Databricks Data management Data pipelines Docker Elasticsearch ETL Flink GitHub Grafana Java Kafka Kubernetes MS SQL NoSQL Oracle Pipelines PySpark Python RDBMS Scala Security Spark SQL Streaming Swift Unstructured data
Perks/benefits: Career development Competitive pay Health care Medical leave Salary bonus
More jobs like this
Explore more career opportunities
Find even more open roles below ordered by popularity of job title or skills/products/technologies used.