Notre société est spécialisée dans la collecte systématique de données.
Nous cherchons un freelance pour réaliser un utilitaire, idéalement en Golang, permettant de collecter des données issues de sites web.
Voici les éléments du cahier des charges:
-Collecter le HTML Externe (outerHTML)
-Crawler d'abord des pages d'index en changeant des paramètres, qui sont dans des formulaires, boutons... (pas toujours des requetes GET). Les URLs ne suffisent pas pour fixer le contenu des pages
-L'utilitaire doit être facilement paramétrable pour être réutilisé sur différents sites