Crawler un site web

Bonjour, je recherche une solution clé en main (cela ne me dérange pas si c'est une solution déjà existante genre deepcrawl.com, mais vous vous occuperez de tous les réglages) ou alors avec un développement spécifique pour crawler un site web assez intensivement mais discrètement (je ne veux pas le ralentir ou me faire bloquer) afin d’extraire des données pour alimenter un tableur excel.

Pour plus de détails n’hésitez surtout pas a me contacter