En tant que Data Engineer confirmé, vous intégrerez l’équipe data de Voltalis. C’est une jeune équipe qui a un an et qui est composée de 5 personnes. Nous sommes en train de finaliser la mise en place de notre stack technique et développons les process autour de l’utilisation de notre plateforme par les autres profils data (data analysts, data scientists).
Principales missions
- Contribuer au développement de nouveaux projets sur notre plateforme (ML, reporting, algorithmes divers…)
- Collaborer avec les data analysts et scientists à migrer leurs usages existants sur notre nouvelle plateforme
- Contribuer à la mise en place des process sur l’utilisation de notre plateforme par les autres profils data, documenter les flux de données
- Participer à la maintenance des jobs quotidiens sur notre pipeline d’acquisition des données sources
Notre stack technique
- Big Query
- Google Cloud Platform
- Scheduler, Workflow, Cloud Run
- Pub/Sub
- python et SQL
- Docker
- Terraform
- Les données sources sont sur MariaDB et Clickhouse pour les time series