Lead Data Engineer Databricks (IT) / Freelance

Votre mission

Dans le cadre du développement de notre plateforme Data, nous recherchons un(e) Senior Data Engineer / Tech Lead Databricks pour piloter les développements, garantir la qualité des solutions mises en ?uvre et accompagner les équipes sur les sujets techniques.

Vous serez notamment amené(e) à :

Concevoir et faire évoluer l?architecture des pipelines de données sur Databricks.

Développer et optimiser les traitements d?ingestion et de transformation en Python, Spark et SQL.

Piloter l?orchestration et la supervision des traitements sur AWS.

Garantir la performance, la fiabilité et la qualité des pipelines de données.

Définir les bonnes pratiques de développement, participer aux revues de code et accompagner les membres de l?équipe.

Assurer le support technique, la résolution des incidents complexes et l?amélioration continue de la plateforme.

Participer aux ateliers d?architecture, aux échanges avec les équipes métiers et contribuer aux choix techniques.

Profil candidat:

Profil recherché

Vous disposez d?une solide expérience en Data Engineering et souhaitez intervenir sur des sujets d?architecture et de leadership technique. Vous êtes reconnu(e) pour votre expertise, votre autonomie et votre capacité à accompagner une équipe.

Compétences techniques

Obligatoires

Python

Spark

Databricks

SQL

AWS (S3, Glue, Airflow, CloudWatch, Lambda, IAM)

Git / GitLab CI/CD

Jira & Confluence

Méthodologie Agile Scrum