Aperçu

Ce tutoriel vous montre comment configurer les proxies résidentiels Dataimpulse dans Screaming Frog SEO Spider sur Windows pour une surveillance SEO fiable, le suivi des positions et l'analyse des SERP. En faisant passer Screaming Frog par les IP résidentielles rotatives de Dataimpulse, vous pouvez éviter les blocages basés sur l'IP et collecter des données de recherche précises à grande échelle.

Dataimpulse fournit des proxies résidentiels et mobiles en paiement à l'usage avec prise en charge de HTTP et SOCKS5, et un pool de plus de 90 millions d'IP. Ses proxies résidentiels sont optimisés pour le scraping web à haut volume et la collecte de données, ce qui les rend bien adaptés aux crawls SEO.

Prérequis

Avant de commencer, assurez-vous de disposer de :

Un ordinateur Windows 10 ou Windows 11.
Screaming Frog SEO Spider installé (télécharger depuis le site officiel).
Un compte Dataimpulse avec les proxies résidentiels activés (s'inscrire ou se connecter).
Vos identifiants de proxy Dataimpulse : hôte, port, nom d'utilisateur et mot de passe (disponibles dans votre tableau de bord).
Une connaissance de base des menus de configuration de Screaming Frog.

Étape 1 : Récupérer vos identifiants de proxy Dataimpulse

Connectez-vous à votre tableau de bord Dataimpulse et localisez vos identifiants de proxy. Vous aurez besoin de :

Hôte proxy : Le nom d'hôte de la passerelle pour vos proxies (par ex., proxy.dataimpulse.com — vérifiez votre tableau de bord pour l'hôte exact).
Port proxy : Le numéro de port pour HTTP ou SOCKS5 (par ex., 8000 ou 823).
Nom d'utilisateur : Votre nom d'utilisateur Dataimpulse.
Mot de passe : Votre mot de passe Dataimpulse.

Dataimpulse prend en charge les protocoles HTTP et SOCKS5. Pour Screaming Frog, HTTP est l'option la plus simple car il fonctionne directement avec les paramètres de proxy de l'outil.

Étape 2 : Créer un fichier de liste de proxies

Screaming Frog accepte un fichier texte contenant un proxy par ligne. Vous pouvez formater chaque ligne comme username:password@host:port ou host:port:username:password. Nous utiliserons le premier format.

Créez un nouveau fichier texte (par ex., dataimpulse_proxies.txt) et ajoutez votre entrée de proxy :

username:[email protected]:8000

Si vous avez plusieurs proxies (par ex., différents ports pour la rotation), ajoutez chacun sur une nouvelle ligne. Enregistrez le fichier dans un emplacement facile à trouver, tel que C:\\SEO\\dataimpulse_proxies.txt.

Remarque : Si votre mot de passe contient des caractères spéciaux comme @, :, ou /, encodez-les en URL (par ex., @ devient %40). C'est important pour le format username:password@host:port.

Étape 3 : Configurer Screaming Frog pour utiliser la liste de proxies

Ouvrez Screaming Frog SEO Spider.
Allez dans Configuration > Proxy.
Dans l'onglet Proxy, sélectionnez Utiliser la liste de proxies.
Cliquez sur Parcourir et sélectionnez votre fichier dataimpulse_proxies.txt.
Définissez Rotation des proxies sur À chaque requête (ou Toutes les N requêtes si vous préférez réutiliser la même IP pour quelques requêtes). Pour la surveillance SEO, une rotation à chaque requête aide à répartir la charge et à éviter les limites de débit.
Si vos proxies nécessitent une authentification, assurez-vous que les champs Nom d'utilisateur et Mot de passe sont laissés vides (puisque les identifiants sont dans le fichier) ou remplis uniquement si vous n'utilisez pas de liste de proxies.
Cliquez sur OK pour enregistrer.

Étape 4 : Tester la connexion proxy

Avant de lancer un crawl complet, vérifiez que Screaming Frog peut se connecter via Dataimpulse. Vous pouvez tester le proxy indépendamment avec PowerShell ou curl.

Ouvrez PowerShell et exécutez :

curl -x http://username:[email protected]:8000 https://httpbin.org/ip

Remplacez username, password, proxy.dataimpulse.com et 8000 par vos identifiants réels. La réponse devrait afficher une adresse IP différente de la vôtre, confirmant que le proxy fonctionne.

Vous pouvez également utiliser le bouton Test intégré de Screaming Frog dans la fenêtre de configuration du proxy pour vérifier la connectivité.

Étape 5 : Lancer un crawl de test

Dans Screaming Frog, saisissez une URL de test (par ex., https://example.com) dans la barre d'adresse.
Cliquez sur Démarrer pour lancer un crawl.
Surveillez la progression du crawl. Si le crawl se termine sans erreur et que l'onglet Externe affiche des résultats, le proxy fonctionne.
Pour vérifier que les requêtes sont acheminées via Dataimpulse, vous pouvez consulter les journaux de crawl ou utiliser un service de vérification d'IP comme URL cible (par ex., https://httpbin.org/ip) et inspecter la réponse HTML.

Dépannage

Erreurs d'authentification : Vérifiez votre nom d'utilisateur et votre mot de passe. Si votre mot de passe contient des caractères spéciaux, encodez-les en URL dans le fichier de liste de proxies.
Expirations de connexion : Assurez-vous que l'hôte et le port du proxy sont corrects. Vérifiez que votre pare-feu ou antivirus ne bloque pas l'accès réseau de Screaming Frog.
Bloqué par le site cible : Certains sites peuvent encore bloquer les IP de datacenter, mais les IP résidentielles de Dataimpulse sont moins susceptibles d'être bloquées. Si vous rencontrez des blocages, réduisez la vitesse de crawl ou passez aux proxies mobiles (également disponibles chez Dataimpulse).
Rotation des proxies ne fonctionne pas : Vérifiez que le fichier de liste de proxies est correctement formaté et que Screaming Frog est configuré pour utiliser la liste. Si vous avez besoin de persistance de session, consultez votre tableau de bord Dataimpulse pour les points de terminaison de sessions persistantes.
Erreurs SSL : Si vous voyez des erreurs SSL, assurez-vous que Screaming Frog est configuré pour faire confiance au certificat du proxy ou désactivez temporairement la vérification SSL pour les tests (non recommandé en production).

Résumé

Vous avez configuré les proxies résidentiels Dataimpulse dans Screaming Frog SEO Spider sur Windows. Cette configuration vous permet d'exécuter des crawls SEO à grande échelle et des tâches de suivi des positions sans déclencher de blocages basés sur l'IP. N'oubliez pas de surveiller votre utilisation des proxies, d'ajuster les paramètres de rotation si nécessaire et de consulter la documentation de Dataimpulse pour les fonctionnalités avancées telles que les sessions persistantes ou la prise en charge de SOCKS5.