Un crawler (araignée) commence avec des URLs de départ, télécharge des pages, extrait des liens et répète—construisant une carte du site ou un ensemble de données. Faites tourner chaque requête via les IPs d’opérateurs mobiles de Proxied pour éviter les limites de taux et les blocages.