> Markdown version of [/jobs/ext/4698179-data-engineer-pyspark-h-f](https://www.wearedevelopers.com/jobs/ext/4698179-data-engineer-pyspark-h-f). Every page supports `.md` or `Accept: text/markdown`. Links point to the HTML versions so they work for humans too. Agent guide: [/agents.md](https://www.wearedevelopers.com/agents.md). --- # Data Engineer Pyspark H/F - **Company:** Nexton - **Location:** Paris, France - **Experience:** Expert - **Contract:** Permanent contract - **Skills:** Application Programming Interfaces (APIs), Agile Methodology, Airflow, Amazon Web Services, Amazon S3, Unit Testing, Big Data, Cloud Computing, Continuous Integration, Memory Management, Amazon DynamoDB, Identity and Access Management, Performance Tuning, Scala (Programming Language), Software Engineering, SQL Databases, Macros, Snowflake, Apache Spark, Git, Pyspark, Gitlab-ci, AWS Fargate, Data Management, Terraform - **Published:** November 13, 2026 - **Apply:** https://www.hellowork.com/fr-fr/emplois/85457449.html ## About the Role Tu possèdes au minimum 5ans d'expérience dans le développement de projets Data.Tes qualités et compétences techniques sont les suivantes :Maîtrise approfondie de PySpark (développement distribué, optimisation des jobs Spark, gestion de la mémoire et du partitionnement).Solide expertise en SQL (requêtage complexe, optimisation de performances, modélisation de data warehouses).Expérience confirmée sur dbt (développement de modèles, macros, tests de données, documentation).Connaissance avancée de l'écosystème Cloud AWS (S3, Glue, EMR, Redshift, IAM, Lambda, etc.).Maîtrise de Terraform pour le provisionnement et la gestion automatisée des ressources Cloud.Bonnes pratiques de développement logiciel (Git, CI/CD, tests unitaires et d'intégration).Tes qualités et compétences transverses sont les suivantes :Esprit d'analyse et de résolution de problèmes : Capacité à diagnostiquer rapidement les goulets d'étranglement sur les traitements de données et à proposer des solutions efficaces.Communication : Aptitude à vulgariser des sujets techniques auprès d'interlocuteurs métiers et techniques.Travail en équipe : Capacité à collaborer au sein d'équipes pluridisciplinaires en environnement Agile.Autonomie et proactivité : Capacité à prendre des initiatives et à être force de proposition sur les choix d'architecture Data.Curiosité technique : Veille active sur les évolutions des technologies Cloud et Data., Tu possèdes au minimum 5ans d'expérience dans le développement de projets Data. Tes qualités et compétences techniques sont les suivantes : * Maîtrise approfondie de PySpark (développement distribué, optimisation des jobs Spark, gestion de la mémoire et du partitionnement). * Solide expertise en SQL (requêtage complexe, optimisation de performances, modélisation de data warehouses). * Expérience confirmée sur dbt (développement de modèles, macros, tests de données, documentation). * Connaissance avancée de l'écosystème Cloud AWS (S3, Glue, EMR, Redshift, IAM, Lambda, etc.). * Maîtrise de Terraform pour le provisionnement et la gestion automatisée des ressources Cloud. * Bonnes pratiques de développement logiciel (Git, CI/CD, tests unitaires et d'intégration). Tes qualités et compétences transverses sont les suivantes : * Esprit d'analyse et de résolution de problèmes : Capacité à diagnostiquer rapidement les goulets d'étranglement sur les traitements de données et à proposer des solutions efficaces. * Communication : Aptitude à vulgariser des sujets techniques auprès d'interlocuteurs métiers et techniques. * Travail en équipe : Capacité à collaborer au sein d'équipes pluridisciplinaires en environnement Agile. * Autonomie et proactivité : Capacité à prendre des initiatives et à être force de proposition sur les choix d'architecture Data. * Curiosité technique : Veille active sur les évolutions des technologies Cloud et Data., Apache spark Scala Force de proposition SQL AWS Gestion des données Git Développement logiciel Pro-activité Travail en équipe Big data Optimisation des performances Autonomie Terraform Esprit d'analyse ## Description Au sein d'un de nos clients grands comptes, dans l'univers des médias, tu interviens dans le programme Data chargé d'aider à la prise décisionnelle., En tant que Data Engineer, tes principales missions sont : - Tu Conçois, développeet maintientdes pipelines de traitement de données massives en PySpark. - Tu construis et optimisesdes modèles de données et des techniques avancées de traitement de données. - Tu mets en place des architectures Big Data sur AWS (S3, EMR, Lambda, Snowflake...). - Tu développes en SQL, Snowflake, Scala, Gitlab CI/CD et exploiter Apache Spark pour le traitement massif des données. - Tu automatisesles workflows avec Apache Airflow et DBT pour orchestrer les pipelines. - Tu conçois et exposes des APIs performantes pour servir les données (Scala, Spark, Terraform, Gitlab CI CD, ECS Fargate, Kinesis, DynamoDB, S3, etc.). - Tu optimisesles performances et garantisla scalabilité du système pour gérer un grand volume d'utilisateurs.