Databricks Data Engineer
Deloitte Consulting B.V.
Amstelveen, Netherlands
2 days ago
Role details
Contract type
Permanent contract Employment type
Part-time / full-time Working hours
Shift work Languages
Dutch, EnglishJob location
Remote
Amstelveen, Netherlands
Tech stack
Artificial Intelligence
Big Data
Information Engineering
Hive
Python
Scala
SQL Databases
Spark
Data Lake
PySpark
Information Technology
Databricks
Programming Languages
Job description
Bij Deloitte werken we hybride. We combineren werken vanuit huis, bij de klant en op kantoor zo optimaal mogelijk.
Requirements
Naturally you are keen to discover and learn new things each day and you are confident and rely on your self-worth. But most importantly, be the true you. The one and only you. With your personal strengths, view of the world and unique personality. You need the following qualifications for the position of Databricks Data Engineer:
- A technical Master's degree, preferably in Data Science, Big Data, Econometrics, Physics, Mathematics, Computer Science, Artificial Intelligence, or a related field;
- At least 4 years of work experience in data engineering; consulting experience is a plus;
- Strong hands-on experience with Databricks and Apache Spark (PySpark and Spark SQL);
- Deep understanding of Delta Lake and medallion architecture;
- Proficiency in SQL and one or more data engineering related programming languages (Python, Scala, etc);
- Relevant Databricks certifications (Data Engineer Associate/Professional, Spark Developer Associate, Data Analyst Associate);
- Excellent command of English and Dutch.
Benefits & conditions
- Je deelt bij ons mee in de winst. Boven op een vast salaris.
- Altijd blijven groeien. Met ons development program.
- Vergoeding om je thuiswerkplek op een ergonomisch verantwoorde manier in te richten én een internetvergoeding.
- Parttime (32 uur) of fulltime (40 uur) werken.
- Flexibele werktijden, je deelt je eigen agenda in.
- 26 vakantiedagen per jaar bij een fulltime dienstverband en de mogelijkheid om extra dagen in te kopen.
- Ruil 3 nationale feestdagen voor 3 niet-nationale feestdagen. Als je wilt.
- Een goede mobiliteitsregeling: de keuze uit verschillende opties zoals een leaseauto, reizen met het OV, een cash budget of een combinatie daarvan.
- Een laptop en iPhone. De iPhone mag je ook privé gebruiken.
- Een tijd-voor-tijdregeling. Gebruik de tijd die je op het ene moment meer maakt op momenten die er voor jou toe doen.
- Een pensioenregeling waarbij je eigen bijdrage slechts 2% is. Voor later.
- Mogelijkheid om deel te nemen aan de collectieve zorgkostenregeling.
- Fiscaal voordelige zaken. Denk aan bedrijfsfitness, het aanschaffen van een fiets tegen bruto salaris of de mogelijkheid om een fiets te leasen.
- De mogelijkheid om gebruik te maken van 55 uur oppasdienst per kalenderjaar, als jouw kind 12 jaar of jonger is.
- Een maandelijks budget waarmee je keuzes kunt maken in flexibele arbeidsvoorwaarden zoals extra vakantiedagen of het financieren van een fietsplan.
- Zes weken volledig betaald geboorteverlof voor traditionele huishoudens en regenbooggezinnen.
About the company
As a Databricks Data Engineer, you will be a trusted adviser to our clients, designing and building reliable ETL/ELT pipelines in Databricks. You will apply the medallion architecture and Delta Lake best practice, optimize clusters for performance and cost, and embed data quality to deliver reliable data products. You will work closely with cloud platform engineers to ensure data solutions are secure, scalable, and easy to operate.
How do you do this?
* Develop, optimize, and operate ETL/ELT pipelines in Databricks using PySpark, SparkSQL, and Scala;
* Run migration programmes to Databricks, including legacy ETL processes into scalable data pipelines;
* Build robust data pipelines on Databricks for real time and batch processing;
* Configure and manage Databricks clusters and jobs for cost and performance efficiency;
* Apply CI/CD to automate testing and deployment of notebooks, jobs, and pipelines;
* Drive adoption of Databricks Lakehouse architecture and data engineering practice across our clients.
Bij Deloitte Engineering werken meer dan 100 engineers en consultants zij aan zij met klanten om ideeën om te zetten in producten. Door onze technische expertise en zakelijke inzichten te combineren, helpen we organisaties complexe uitdagingen aan te gaan en duurzame resultaten te behalen. We leveren ons werk en onze expertise aan klanten via twee nauw met elkaar verbonden pijlers