> Markdown version of [/jobs/ext/725982-data-engineer-databricks-aws](https://www.wearedevelopers.com/jobs/ext/725982-data-engineer-databricks-aws). Every page supports `.md` or `Accept: text/markdown`. Links point to the HTML versions so they work for humans too. Agent guide: [/agents.md](https://www.wearedevelopers.com/agents.md). --- # Data Engineer Databricks/AWS - **Company:** Visian - **Location:** Paris, France - **Contract:** Permanent contract - **Skills:** Amazon Web Services, Data Validation, Data Cleansing, Python (Programming Language), Raw Data, SQL Databases, Apache Spark, Data Lakes, Pyspark, Data Management, Databricks - **Published:** June 29, 2026 - **Apply:** https://fr.indeed.com/viewjob?jk=7601ee800c913f91 ## About the Role SQL Niveaux d'expérience Python V3 Confirmé Niveaux d'expérience Pyspark Confirmé Databricks (unity catalog, workflow, job, notebook) Confirmé AWS (Lambda, ECS, Step Function) confirmé ## Description Le Data Engineer supervise et intègre des données de natures diverses provenant de sources multiples ; il vérifie la qualité des données entrant dans le Data Lake, en effectuant notamment des tests, la déduplication et les activités d'assurance qualité associées. Les principales responsabilités incluent : Qualification et gestion des données : * Collecte de données structurées et non structurées produites par différentes applications ou provenant de sources externes à l'entité * Intégration des éléments * Structuration des données (sémantique, etc.) * Cartographie des éléments disponibles * Nettoyage des données (élimination des doublons, etc.) * Validation des données * Création éventuelle du référentiel de données La plateforme de données permet à tous les domaines producteurs de données de mettre à disposition des données brutes ou retravaillées dans un Data Lake. Cette plateforme gère notamment les fonctionnalités et les données relevant du périmètre métier « Relation Réseau ». Elle permet : * L'intégration et l'assurance qualité des données brutes reçues des distributeurs * La mise à disposition de données GRD exploitables pour tous les besoins du segment et de l'organisation (qu'il s'agisse de besoins opérationnels ou analytiques issus de tous les domaines métiers), * Maîtrise des outils Databricks (création de jobs, clusters, notebooks) et capacité à effectuer des requêtes SQL efficaces * Maintien en conditions opérationnelles de la plateforme de production (analyse et correction d'incidents et d'anomalies) * Développement de jobs d'ingestion et de transformation de données en Python avec Spark pour traiter de grands volumes de données * Apport d'une vision à long terme, tant sur le plan opérationnel que stratégique pour la plateforme de données * Soutien et promotion des meilleures pratiques * Participation aux ateliers de conception technique et fonctionnelle * Rédaction et mise à jour de la documentation technique ## Related Videos - [Data Governance in the Era of AI](https://www.wearedevelopers.com/videos/1622-data-governance-in-the-era-of-ai) - [Empowering Retail Through Applied Machine Learning](https://www.wearedevelopers.com/videos/976-empowering-retail-through-applied-machine-learning) - [PySpark - Combining Machine Learning & Big Data](https://www.wearedevelopers.com/videos/44-pyspark-combining-machine-learning-big-data) - [Data Science in Retail](https://www.wearedevelopers.com/videos/586-data-science-in-retail) - [Enjoying SQL data pipelines with dbt](https://www.wearedevelopers.com/videos/823-enjoying-sql-data-pipelines-with-dbt) - [The Data Mesh as the end of the Datalake as we know it](https://www.wearedevelopers.com/videos/156-the-data-mesh-as-the-end-of-the-datalake-as-we-know-it) ## Related Articles - [Top Big Data Technologies That You Need to Know](https://www.wearedevelopers.com/magazine/108-top-big-data-technologies-that-you-need-to-know) - [Data Engineer Salary UK](https://www.wearedevelopers.com/magazine/253-data-engineer-salary-uk) - [Making Data Warehouses Fast: A Developer’s Story](https://www.wearedevelopers.com/magazine/107-making-data-warehouses-fast-a-developer-s-story) - [Data Analyst Salary in the UK](https://www.wearedevelopers.com/magazine/278-data-analyst-salary-in-the-uk) - [Highest Paying Tech Companies for Developers](https://www.wearedevelopers.com/magazine/220-highest-paying-tech-companies-for-developers) - [Software Engineer Salary London](https://www.wearedevelopers.com/magazine/252-software-engineer-salary-london)