Développement d'un projet ELT (données Google Search Console)

Nous recherchons pour une mission backend un développeur travaillant avec l'éco-système suivant : PHP/Symfony, Google Cloud Platform (BigQuery, Storage et Tasks) et Terraform.

Notre mission a pour périmètre :
1/ Mise en place d'une structure Symfony pour un process ELT automatisé,
2/ Lecture d'un fichier de configuration dans une Google Sheets,
3/ Gestion multi-projets GCP et multi comptes de service (activation d'API, création de dataset et paramètres) avec Terraform,
4/ Pipeline d'Extract des données provenant de Google Search Console,
5/ Load pour injecter les données dans les datasets BigQuery respectives de chaque projet GCP,
6/ Transform à travers des vues pour ajouter des colonnes customs par dataset selon la configuration et
7/ Mise en place des tâches automatisées pour lancer le process en journalier avec une gestion des erreurs via StackDriver.

Les éléments qui seront communiquées pour cette mission :
- Spécifications (endpoints, usecases, ...)
- MCD, schéma jSON pour nos bases BigQuery et templates, ...
- Accès vers les projets GCP

Le delivery pour cette mission :
- Projet ELT sur notre serveur
- Documentation technique (lignes de commandes, configuration Terraform et commentaires)

Démarrage ASAP pour une mission d'une semaine. Travail à distance.
Si cette mission vous intéresse je vous invite à me contacter pour en discuter.