Data Engineer / Big Data (H/F) - Expert GCP, Kafka, Spark, Scala, Cassandra à Boulogne-Billancourt, France
ALTEN
Boulogne-Billancourt, France
Description de l'entreprise
Rejoignez ALTEN, la “Maison des ingénieurs”...
Leader de l’Ingénierie et des Entreprise IT Services, ALTEN regroupe près de 57 000 collaborateurs, dont 88% d’ingénieurs. Présent dans plus de 30 pays, le Groupe accompagne la stratégie de développement de ses clients dans les domaines de l’innovation, de la R & D et des systèmes d'information technologiques.
L’activité du Groupe s’articule autour de deux métiers : l’Ingénierie (Conception Produit & Manufacturing) et l’IT Services (Systèmes d’informations & Réseaux).
Aéronautique • Automobile • Banque, Finance & Assurance • Défense & Sécurité • Energie & Environnement • Ferroviaire • Retail & Services • Sciences de la vie - Santé • Spatial • Télécoms.
Description du poste
Nous recherchons un(e) Data Engineer passionné(e) par le Big Data et les architectures distribuées pour concevoir, optimiser et déployer des solutions data à grande échelle.
Missions principales :
Concevoir, développer et maintenir des pipelines data robustes et scalables.
Travailler sur des architectures distribuées (Kafka, Spark, Cassandra).
Optimiser les traitements de données sur GCP (BigQuery, Dataflow, Dataproc, etc.).
Collaborer avec les équipes Data Science et DevOps pour industrialiser les solutions.
Assurer la performance, la fiabilité et la sécurité des infrastructures data.
Qualifications
Expérience : Minimum 5 ans en tant que Data Engineer ou Big Data Engineer .
Compétences techniques obligatoires :
Maîtrise de GCP (Google Cloud Platform) et de ses services (BigQuery, Pub/Sub, Dataflow, etc.).
Expérience confirmée avec Apache Kafka (streaming, connecteurs).
Expertise en Spark (PySpark ou Scala) pour le traitement distribué.
Connaissance approfondie de Scala ou Python pour le développement.
Expérience avec Cassandra (modélisation, requêtes, optimisation).
Atouts supplémentaires :
Connaissance des outils de monitoring (Prometheus, Grafana).
Expérience avec Airflow , Docker , ou Kubernetes .
Familiarité avec les bonnes pratiques DevOps (CI/CD, IaC).
Soft skills :
Esprit d’équipe, autonomie et capacité à résoudre des problèmes complexes.
Bonne communication pour collaborer avec les métiers et les équipes techniques.
Intitulé du poste DATA ENGINEER BIG DATA F/H - SUPPORT Métier Systèmes d'informations - Développement Présentation du contexte Air France, en tant qu’acteur majeur du transport aérien accompagne chaque année des millions de passagers tout autour du globe. Nos métiers, au-delà du service offert à nos clients, sont générateurs ...
... datas innovants en ayant un réel impact client et en fonction de vos qualifications , Développeur, Architecte, Business Analyst, chef de projet, Scrum Master, Data Engineer ou Data Scientist, vous réalisez les activités suivantes : - Participation aux phases de développement d'applications Big Data (ETL, création de pipelines, ...
... dans ce rôle - Expérience confirmée DevOps / SRE, cloud-native avec une bonne connaissance de Kubernetes. - Forte appétence indispensable pour les plateformes data et les environnements analytiques. - Expérience sur des stacks Big Data / Data Platform, notamment : - Apache Spark, Trino, Iceberg, MinIO / S3 (au moins une ...
... bon relationnel, vous êtes attaché(e) à la satisfaction du client et vos qualités humaines feront la différence. Mission Dans le cadre de notre principal projet Big Data, nous recherchons un Développeur Big Data pour rejoindre notre équipe de 15 consultants travaillant au sein de l’écosystème Hadoop, spark, cloudera, hive. ...
... école commerce / d’ingénieurs, école ou formation universitaire / IUT équivalente, avec une spécialisation ou une forte appétence pour la gestion des données (Data / Business Intelligence) et les systèmes d'information. Ce que nous recherchons chez vous : - Une réelle aisance avec les outils et la donnée : vous aimez manipuler, ...
... l'implémentation de tests unitaires, d'intégration et de non-régression Profil En tant que Data Engineer vous maîtrisez : - Le langage SQL - Un langage objet (Python, JAVA, Scala) - Un framework de calcul distribué - L'intégration continue (Git, JUnit, SonarQube, Jenkins) - Un cloud provider (AWS, GCP, Azure) ou une distribution Big Data ...
... : Les compétences clés recherchées sont : - Une expérience requise dans ce type d'environnement de 3 ans minimum. - Maîtrise des langages et outils tels que Spark, Scala, Java, ainsi que les environnements Azure (Azure Data Explorer, Azure DevOps). - Une base solide en SQL est un pré-requis. - La maîtrise des concepts ...
... totale de 2 ans. Temps de travail Temps complet Descriptif de l'emploi Afin de structurer la plateforme donnée et sa gouvernance, l'Agglomération recrute un Data Engineer H/F. En cohérence avec son choix d'utiliser la suite Microsoft 365, l'Agglomération souhaite structurer sa plateforme sur Microsoft Fabric. Au regard ...
... performance et de qualité (sécurité, conformité, maintenabilité) Ce poste est une opportunité unique d'évoluer dans un environnement technique stimulant : - Data Platform : Databricks / Spark principalement, Google Cloud Platform - Code Programming : Python principalement, SQL, Scala - Data orchestration : Airflow - Delivery ...
... amené(e) à : - Déployer, configurer et maintenir des applicatifs techniques sous Linux - Intégrer et administrer les briques de collecte et de traitement des logs :Kafka - OpenSearch / ElasticSearch - Airflow - Rsyslog Automatiser les déploiements et opérations d'exploitation via AnsibleDévelopper des scripts d'intégration et ...