Scraping Engineer

Êtes-vous à la recherche d'un nouveau challenge ? Nous vous invitons à rejoindre Eleveight ! 

Nous recherchons pour le compte de notre partenaire un Ingénieur Scraping qui aura comme missions ce qui suit.

• Développer le scraping de nouveaux sites et mettre en place les spiders associés.


• Maintenir, analyser et réparer les spiders existants lorsqu’ils ne récupèrent plus correctement les données.


• Identifier les causes des problèmes de collecte et mettre en place les corrections nécessaires.


• Optimiser les performances et la fiabilité des spiders en production.


• Travailler sur une volumétrie importante de scraping, avec plusieurs centaines de sites/spiders.


• Tester et évaluer de nouveaux proxies selon les besoins des différents sites.


• Gérer et optimiser le mix de proxies utilisé pour le scraping.


• Participer au dimensionnement des proxies en fonction des besoins de collecte.


• Suivre et optimiser les coûts de scraping, notamment les coûts associés aux proxies.


• Participer aux décisions techniques et stratégiques liées à l'activité scraping.


• Être capable d'intervenir directement dans le code et de challenger les choix et livrables techniques.

Profil recherché :

• De formation Bac+5 


• 1 à 2 ans minimum d’expérience réelle en scraping en production.


• Expérience en scraping industriel, idéalement sur une volumétrie de 300+ sites/spiders.


• Expérience dans le Retail / E-commerce et/ou sur des comparateurs de voyages.


• Très bonne maîtrise de Python, Scrapy et Zyte.


• Bonne connaissance de Playwright et Camoufox.


• Expérience concrète de problématiques de scraping complexes, notamment :
  
  
  
  • passage de CDN et gestion des problématiques associées ;
  
  
  • scraping de gros retailers avec des systèmes anti-bot ;
  
  
  • récupération de données depuis des API catalogue fermées ;
  
  
  • gestion et pilotage d’un mix de proxies.
  
  
  
  


• Expérience dans le suivi et l’optimisation des coûts de scraping.


• Capacité à intervenir directement dans le code et à résoudre des problématiques techniques en production.


• Capacité à prendre des décisions techniques et stratégiques et à challenger les solutions proposées.


• Autonomie et capacité à évoluer dans une petite équipe technique.

A propos d'Eleveight : 

Eleveight est entreprise de recrutement spécialisé dans les solutions de talents sur mesure pour accompagner les entreprises dans leur transformation.

Nous connectons les meilleurs experts en Change & Transformation, Business Applications et Data & AI avec des projets ambitieux, en offrant des opportunités adaptées à leurs compétences et aspirations.

Grâce à notre approche personnalisée et à notre réseau international, nous assurons un accompagnement de qualité tout au long du processus, garantissant des missions stimulantes et un environnement propice à l’évolution professionnelle.

Rejoignez Eleveight et accédez à des opportunités qui valorisent votre expertise et accélèrent votre carrière.