Data Engineer
Nantes, Pays de la Loire, France
Apside
Découvrez le groupe Apside : sa culture, ses valeurs, son expertise technologique et sectorielle. Plongez dans l'univers d'une entreprise qui souhaite réinventer le modèle de l'ESN.Offre d'Emploi : DATA ENGINEER H/F chez Apside
Description du poste : Nous sommes à la recherche d'un Data Engineer passionné pour rejoindre notre équipe dynamique. Si vous avez une expertise dans le Big Data, la Data Science, l'analyse de données et l'architecture de données, cette opportunité est faite pour vous. Intégrer notre communauté Data, c’est l’assurance de progresser, innover, partager, vous certifier et rendre service à nos clients.
Vos missions :
- Développement des jobs Spark pour la collecte et la transformation des données comptables disponibles dans les bucket S3.
- Optimisation des jobs Spark.
- Développement des batchs Java et écriture des données au formats comptables.
- Écriture et ordonnancement des DAGs Airflow.
- Support du développement Spark Scala.
- Maintenance applicative.
- Production des événements dédiés à la plateforme de données.
.
Votre rôle, vos compétences :
- Vous maîtrisez au minimum un langage de programmation appliqué à l’analyse de données (SQL, Scala, Python, Java).
- Vous êtes passionné par le Big Data et le Machine Learning.
- Vous concevez et mettez en œuvre des stratégies sécurisées d'acquisition et d'intégration de données.
- Vous configurez des référentiels de données à la pointe de la technologie dans des environnements distribués, majoritairement dans le cloud (Google Cloud Platform, Azure, AWS) et/ou en environnement Hadoop (distribution MapR, Cloudera, Hortonworks).
Environnement technique :
- SQL
- Python/Spark
- Cloud AWS: AWS Glue, AWS Lambda (possibilité de vous former sur AWS)
- Stockage objet (AWS S3)
- Orchestration et scheduling de tâches (Apache Airflow)
- Bases analytiques et bases NoSQL (ElasticSearch, AWS Athena)
Rejoignez-nous et apportez votre touche à l'évolution d'Apside !
Apside s'engage pour l'emploi des personnes en situation de handicap avec Apsid'EA.
Apside : L'expertise technologique avec une touche humaine.
Requirements
Votre profil :
- Fort de 4 années d’expérience en Data Engineer/ DATA ANALYST
- Titulaire d’une formation supérieure IT.
- Capacité à s’intégrer dans un cadre technique client tout en étant à même de proposer des pistes d’améliorations pertinentes.
- Autonome dans la gestion des projets.
- Curieux et impliqué, vous êtes bon communicant avec les clients et les acteurs de culture technique différente.
* Salary range is an estimate based on our AI, ML, Data Science Salary Index 💰
Tags: Airflow Architecture Athena AWS AWS Glue Azure Big Data Elasticsearch GCP Google Cloud Hadoop Java Lambda Machine Learning NoSQL Python Scala Spark SQL
Perks/benefits: Career development
More jobs like this
Explore more career opportunities
Find even more open roles below ordered by popularity of job title or skills/products/technologies used.