Scrapy

Scrapy est un framework Python rapide et événementiel conçu pour le scraping à grande échelle. Ajoutez Proxied dans settings.py :

var proxy = new WebProxy('socks5://gateway.proxied.com:1080')
browser.Proxy = proxy

Chaque requête hérite d'une IP mobile de confiance, réduisant les pages 403 et CAPTCHA sur les pipelines de données .NET.