Les meilleurs développeurs PHP freelances sont sur Codeur.com
Développement traitement en masse de données
Fermé · 300 à 800 € · 2 offres · 965 vues
Bonjour
Nous cherchons un freelance sur la région lyonnaise pour un developpement Python
Il s'agit de finir le développement d'un traitement en masse de données (plusieurs millions / 24h).
Le traitement Crawl des millions de pages en multithreading random multiproxies random multi agent puis extrait des informations spécifiques.
Les URL des pages crawlées sont issues d'une BDD. Mysql
Si vous maîtrisez python merci de passer en pv pour plus de details
La partie de déploiement sur un serveur unix est notamment nécessaire.
Le traitement utilise des données crawlés via plusieurs proxy.
Voici les compétences attendues:
Python 3.5.1
XPATH
Unix / serveur dédié
Mysql
Taches Cron
Mots clés: Python, MultiThreading, MultiSecured Proxy, Unix
Budget indicatif : 300 à 800 €
Publication : 30 décembre 2015 à 08h28
Profils recherchés : Développeur PHP freelance , Développeur Python freelance
2 freelances ont répondu à ce projet
2 propositions de devis en moins de 2h
Chaque jour, des centaines de clients utilisent Codeur.com pour trouver un prestataire. Créez votre compte dès maintenant, remplissez votre profil et trouvez de nouveaux clients.
