Job Description
En tant que Data Engineer Senior, vous aurez pour rôle de concevoir, coder, tester et déployer des pipelines d’ingestion, de traitement, de modélisation et de valorisation de données, afin que ces données puissent être restituées et visualisées à travers les applications web, en utilisant des technologies modernes.
Vos principales missions:
● Travailler sur des environnements Data et Cloud, notamment GCP.
● Exploiter BigQuery et SQL avancé sur de gros volumes de données.
● Appropriation des nouvelles technologies LLM dans sa routine de développement
● Gérer des flux temps réel avec Pub/Sub.
● Automatiser les workflows data via GitLab CI/CD et Docker Compose.
● Versionner le code avec Git.
● Collaborer en environnement agile (Scrum).
● Modélisation et préparation des données : conception de pipelines optimisés dans BigQuery,
en garantissant la qualité, la fiabilité et la cohérence des an...