Scraping sites d'emplois

A partir d’une liste d’URL ( fichier texte) de sites d’emploi pointant sur un formulaire recherche d’emploi qui renvoi une liste de job qui contient un lien sur la page détail d’une annonce d’emploi ; collecter les informations de l’annonce pour créer un fichier .csv par URL de site avec la liste des jobs :, une ligne par job . Les champs à collecter sont : url du site web , Nom du poste, nom de ville, Pays, catégorie/secteur d’activité, type d’emploi ( CDI,CDD, temps partiel,…), niveau d’étude ( bac+x), nombre d’année d’expérience, niveau d’expérience ( débutant, junior, senior, ..) description de la mission.
Le prestataire proposera un script robot devra fonctionner sur un échantillon de 50 URL représentatives que je vous communiquerai.
Le robot devra fonctionner en automatique quelque soit l’ URL sans paramétrage spécifique d’une URL à une autre idéalement : La reconnaissance des champs à extraire devra être automatique.
Le robot devra pouvoir extraire un champs basé sur un tag de localisation du champs. Dans le cas ou le tag n’existe pas. le robot devra extraire la valeur directement si elle figure dans la liste des libellés reconnus.