Analyse/Crawl de liens

Nous cherchons à développer un script qui crawlerait un certains nombre d'urls (one shot) et qui rendraient certaines informations disponibles dans ces pages (noindex etc...) dans un tableau (issu d'une bdd)
Développement en PHP/MySQL (pour le stockage de la data)
Pas de travail graphique, tableau brut
Détail en M.P.