Nous développons un projet d'analyse de données basé sur le scrapping d'un grand nombre d'informations sur différents site web.
L'application est en production depuis un an et notre croissance nous amène vers un problème de gestion du flux de données de notre base.
Nous recherchons donc un freelance qui puisse nous aider à mettre à jour notre architecture et nos processus dans le but de pouvoir gérer nos nouveaux besoins :
- de stockage de masse
- de performance
- d'adaptabilité à une charge croissante
L'application est développé en Python/Django, la base actuelle est PostgreSQL et nous utilisons les services AWS pour faire tourner l'application.