Deloitte logo

Databricks Data Engineer

Deloitte

Amsterdam
Full-time
2-5 years experience
Hybrid

Key Skills

Databricks
Apache Spark
PySpark
Spark SQL
Delta Lake
Medallion Architecture
SQL
Python
Scala
ETL/ELT Pipeline Development
Data Engineering
Real-Time Data Processing
Batch Processing
Cluster Optimization
CI/CD
Data Quality

Job Description

De rol in het kort You will design, build, and optimize data pipelines in Databricks. You will apply data engineering best practice and use core Databricks features to deliver scalable and reliable data solutions for our clients. At Deloitte. Benefits Je deelt bij ons mee in de winst, boven op een vast salaris. Altijd blijven groeien met ons development program. Flexibele werktijden en hybride werken, afgestemd op je team en je klantverplichtingen. 26 vakantiedagen per jaar bij een fulltime dienstverband en de mogelijkheid om extra dagen in te kopen. Parttime (32 uur) of fulltime (40 uur) werken. Ruil 3 nationale feestdagen voor 3 niet-nationale feestdagen, als je wilt. Een tijd-voor-tijdregeling. Gebruik de tijd die je op het ene moment meer maakt op momenten die er voor jou toe doen. De mogelijkheid om minimaal 2 maanden op sabbatical te gaan. Een goede mobiliteitsregeling: de keuze uit verschillende opties zoals een leaseauto, reizen met het OV, een cash budget of een combinatie daarvan. Vergoeding om je thuiswerkplek op een ergonomisch verantwoorde manier in te richten én een internetvergoeding. De mogelijkheid om gebruik te maken van 55 uur oppasdienst per kalenderjaar, als jouw kind 12 jaar of jonger is. Een laptop en iPhone. De iPhone mag je ook privé gebruiken. Een pensioenregeling waarbij je eigen bijdrage slechts 2% is. Mogelijkheid om deel te nemen aan de collectieve zorgkostenregeling. Fiscaal voordelige regelingen, zoals bedrijfsfitness, het aanschaffen van een fiets tegen bruto salaris of de mogelijkheid om een fiets te leasen. Een maandelijks budget waarmee je keuzes kunt maken in flexibele arbeidsvoorwaarden, zoals extra vakantiedagen of het financieren van een fietsplan. Zes weken volledig betaald geboorteverlof voor traditionele huishoudens en regenbooggezinnen. Meer over benefits What's in it for you? Je deelt bij ons mee in de winst, boven op een vast salaris. Altijd blijven groeien met ons development program. Flexibele werktijden en hybride werken, afgestemd op je team en je klantverplichtingen. 26 vakantiedagen per jaar bij een fulltime dienstverband en de mogelijkheid om extra dagen in te kopen. Parttime (32 uur) of fulltime (40 uur) werken. Ruil 3 nationale feestdagen voor 3 niet-nationale feestdagen, als je wilt. Een tijd-voor-tijdregeling. Gebruik de tijd die je op het ene moment meer maakt op momenten die er voor jou toe doen. De mogelijkheid om minimaal 2 maanden op sabbatical te gaan. Een goede mobiliteitsregeling: de keuze uit verschillende opties zoals een leaseauto, reizen met het OV, een cash budget of een combinatie daarvan. Vergoeding om je thuiswerkplek op een ergonomisch verantwoorde manier in te richten én een internetvergoeding. De mogelijkheid om gebruik te maken van 55 uur oppasdienst per kalenderjaar, als jouw kind 12 jaar of jonger is. Een laptop en iPhone. De iPhone mag je ook privé gebruiken. Een pensioenregeling waarbij je eigen bijdrage slechts 2% is. Mogelijkheid om deel te nemen aan de collectieve zorgkostenregeling. Fiscaal voordelige regelingen, zoals bedrijfsfitness, het aanschaffen van een fiets tegen bruto salaris of de mogelijkheid om een fiets te leasen. Een maandelijks budget waarmee je keuzes kunt maken in flexibele arbeidsvoorwaarden, zoals extra vakantiedagen of het financieren van een fietsplan. Zes weken volledig betaald geboorteverlof voor traditionele huishoudens en regenbooggezinnen. Be the true you Naturally you are keen to discover and learn new things each day and you are confident and rely on your self-worth. But most importantly, be the true you. The one and only you. With your personal strengths, view of the world and unique personality. You need the following qualifications for the position of Databricks Data Engineer: A technical Master’s degree, preferably in Data Science, Big Data, Econometrics, Physics, Mathematics, Computer Science, Artificial Intelligence, or a related field; At least 4 years of work experience in data engineering; consulting experience is a plus; Strong hands-on experience with Databricks and Apache Spark (PySpark and Spark SQL); Deep understanding of Delta Lake and medallion architecture; Proficiency in SQL and one or more data engineering related programming languages (Python, Scala, etc); Relevant Databricks certifications (Data Engineer Associate/Professional, Spark Developer Associate, Data Analyst Associate); Excellent command of English and Dutch. What impact will you make? As a Databricks Data Engineer, you will be a trusted adviser to our clients, designing and building reliable ETL/ELT pipelines in Databricks. You will apply the medallion architecture and Delta Lake best practice, optimize clusters for performance and cost, and embed data quality to deliver reliable data products. You will work closely with cloud platform engineers to ensure data solutions are secure, scalable, and easy to operate. How do you do this? Develop, optimize, and operate ETL/ELT pipelines in Databricks using PySpark, SparkSQL, and Scala; Run migration programmes to Databricks, including legacy ETL processes into scalable data pipelines; Build robust data pipelines on Databricks for real time and batch processing; Configure and manage Databricks clusters and jobs for cost and performance efficiency; Apply CI/CD to automate testing and deployment of notebooks, jobs, and pipelines; Drive adoption of Databricks Lakehouse architecture and data engineering practice across our clients. We zouden je graag willen leren kennen! We zijn benieuwd naar wie jij bent. Waarin jij verschilt van anderen. Bij Deloitte geloven we dat onze onderlinge verschillen bijdragen aan het beste resultaat voor onze klanten. Stel je aan ons voor en solliciteer op deze vacature.

Core Responsibilities

Design, build, optimize, and operate reliable Databricks ETL/ELT pipelines for batch and real-time processing, including migrations from legacy systems. Apply Lakehouse, medallion architecture, and Delta Lake practices; optimize clusters and jobs for cost and performance; automate testing and deployment; and collaborate with cloud platform engineers to deliver secure, scalable data solutions.

Requirements

Requires a technical master's degree, preferably in a relevant field, and at least four years of data engineering experience; consulting experience is a plus. Candidates should have hands-on Databricks and Spark experience, strong SQL and programming skills, knowledge of Delta Lake and medallion architecture, relevant Databricks certifications, and excellent English and Dutch.

Benefits

  • Profit Sharing
  • Professional Development Program
  • Flexible Working Hours
  • Hybrid Working
  • 26 Days of Annual Leave
  • Option to Purchase Additional Leave
  • Part-Time or Full-Time Work Options
  • Option to Exchange Public Holidays
  • Time-Off-in-Lieu Scheme
  • Sabbatical Leave
  • Mobility Allowance
  • Ergonomic Home Office Allowance
  • Internet Allowance
  • Childcare Service
  • Laptop and iPhone
  • Pension Plan
  • Collective Health Insurance Plan
  • Tax-Advantaged Benefits
  • Flexible Benefits Budget
  • Six Weeks of Fully Paid Parental Leave

About Deloitte

Industry: Business Consulting and Services

Company size: 10,001+ employees

Deloitte drives progress. Our firms around the world help clients become leaders wherever they choose to compete. Deloitte invests in outstanding people of diverse talents and backgrounds and empowers them to achieve more than they could elsewhere. Our work combines advice with action and integrity. We believe that when our clients and society are stronger, so are we. Deloitte refers to one or more of Deloitte Touche Tohmatsu Limited (“DTTL”), its global network of member firms, and their related entities. DTTL (also referred to as “Deloitte Global”) and each of its member firms are legally separate and independent entities. DTTL does not provide services to clients. Please see www.deloitte.com/about to learn more. The content on this page contains general information only, and none of Deloitte Touche Tohmatsu Limited, its member firms, or their related entities (collectively the “Deloitte Network”) is, by means of this publication, rendering professional advice or services. Before making any decision or taking any action that may affect your finances or your business, you should consult a qualified professional adviser. No entity in the Deloitte Network shall be responsible for any loss whatsoever sustained by any person who relies on content from this page.

Added Today