Créer un script de récupération d'API avec plusieurs Endpoints

Je recherche une personne compétente et qualifiée capable de concevoir deux scripts permettant de :
1- récupérer l'historique des données via une API avec 7500 Endpoints environ de façon automatique,
2- mettre à jour quotidiennement les données.

Il s'agit d'une seule API avec plusieurs points de terminaison.

L'objectif est de récupérer des données, de les structurer et de les stocker dans une base de données MariaDB, avec plusieurs tables. Chaque endpoint doit être stockée dans une table.

Le freelance devra créer les tables conformément à la structure des données avec les codes, libellés etc.

Je recommande l'utilisation de la technologie en Node.js, mais je suiis ouvert à d'autres solutions. Par contre, la base de données est SQL MariaDB.

Le premier pour récupérer l'historique et le second pour le mettre à jour. Le script de récupération de l'historique ne doit pas effectuer la même tâche que le script de mise à jour quotidienne.

Le script doit être conçu de manière que lorsqu'il s'arrête, il doit pouvoir reprendre là où il s'est arrêté en cas de problème. La reprise doit toujours se faire là où il s'est arrêté. Mais aussi, le script/la base de données doit être configuré(e) de façon à éviter les doublons.

Le freelance peut, sans que cela ne soit obligatoire selon les conditions spécifiques et avant la fin de la mission, créer les tables nécessaires directement dans ma base de données qui lui sera mis à sa disposition, et lancer les scripts afin d'effectuer les tests de récupération et de mise à jour.

Le prestataire doit rajouter à chaque table, les de récupération des données et des mise à jour, à chaque fois celle-ci est effectuée par le fournisseur.

Les données doivent être collectées avec des informations claires, et des échantillons à valider ensemble.

Le script doit être configuré de manière à respecter le délai d'attente de récupération entre chaque requête imposé par le fournisseur de données, afin d'éviter tout blocage et du bannissement du serveur.

En cas de besoin, d'autres spécifications techniques supplémentaires seront communiquées lors de l'échange, ainsi que les liens permettant de prendre connaissance de la documentation de l'API.