Cookbook·Sport et plein air·rei.com
Scraper les pages produit sur rei.com
L’appel qui renvoie les pages produit de rei.com aujourd’hui, avec les paramètres, les motifs et les modes d’échec lus dans le journal des requêtes depuis le 14 août 2026. Dernier test le 6 sept. 2026.
91.6% de réussite · août 2026Aucun browser nécessairePrix Standard · 1 crédit
À propos de rei.com
rei.com se décrit ainsi : « Équipement et vêtements de grandes marques, et aventures en plein air ! Plus locations, cours, événements, conseils d’experts et bien plus. Visitez REI Co-op en ligne et en magasin ».
Ses sitemaps listent 50 329 URL dans 19 fichiers (core-category, campaign-landing-page, product, product-2, product-3, product-4). 19 854 des 50 329 entrées datées ont changé au cours des 30 derniers jours, la plus récente le 5 sept. 2026.
Son robots.txt nomme 1 sitemap et interdit 12 chemins.
Mesuré sur Crawlbase
Taux de réussite sur chaque requête de chaque compte en août 2026 : 91.6%. Motifs, pays et échecs viennent du journal des requêtes depuis le 14 août 2026 ; 0.1% des appels réussis ont utilisé le token JavaScript et la réponse médiane a pris 2.6s.
Parmi les 20 sites sport et plein air du Cookbook, rei.com se place 19 sur 20 au taux de réussite ; la médiane de la catégorie est de 99.2%. Sa réponse médiane de 2.6s est plus rapide que la médiane de la catégorie, 7.1s. 12 des 20 acceptent le token simple, celui-ci compris.
L’appel
Les pages produit sont la forme que les comptes récupèrent le plus ici, avec le pays et le token qui réussissent le plus souvent. Remplacez le chemin fictif par une vraie URL produit du site.
curl "https://api.crawlbase.com/?token=YOUR_TOKEN&url=https%3A%2F%2Fwww.rei.com%2Fproduct%2F206749%2Fcamp-daisy-twist"from crawlbase import CrawlingAPI api = CrawlingAPI({'token': 'YOUR_TOKEN'}) r = api.get('https://www.rei.com/product/206749/camp-daisy-twist') html = r['body']
const { CrawlingAPI } = require('crawlbase'); const api = new CrawlingAPI({ token: 'YOUR_TOKEN' }); const r = await api.get('https://www.rei.com/product/206749/camp-daisy-twist');
Les paramètres qui comptent
| Paramètre | Valeur | Pourquoi |
|---|---|---|
country | laisser vide | La plupart des appels réussis ne définissent aucun country (99.9%) et réussissent à 91.7%. |
javascript | laisser vide | Les appels avec le token simple réussissent à 91.7% et représentent 99.9% du trafic. Un browser coûte plus cher et, sur ce site, n’apporte rien. |
Motifs d’URL que les comptes récupèrent
| Motif | Part des réussites | Token JavaScript | Country | Paramètres de requête |
|---|---|---|---|---|
/product/{id} | 71.0% | 0.0% | aucun | aucun |
/product/{id}/{slug} | 28.5% | 0.0% | aucun | aucun |
Les champs que vous obtenez
Données structurées que Crawlbase a trouvées sur rei.com, par type de page. Ce sont les types schema.org de la page, les champs que votre parseur peut lire directement dans le bloc JSON-LD :
- Accueil:
Organization, WebSite - Page détail:
Product, BreadcrumbList
Ce qui casse, et la solution
Sur les échecs depuis le 14 août 2026, le site a répondu :
403 : 35.6% des échecs Un 403 est le site qui refuse la sortie. Définissez le country utilisé par les appels réussis et réessayez une fois ; un second 403 signifie que l’URL elle-même est protégée.
0 : 21.8% des échecs Un statut 0 est un request qui n’a jamais reçu de réponse dans le timeout. Réessayez une fois avec le token JavaScript si le motif a besoin d’un browser.
200 : 20.5% des échecs Le site a répondu 200 avec une page de blocage ou de consentement à la place du contenu ; Crawlbase la compte comme un échec plutôt que de vous la facturer. Réessayez une fois avec le token JavaScript et le pays des appels réussis.
400 : 18.8% des échecs 400 signifie que le site a refusé la récupération. Traitez-le comme un blocage : réessayez une fois avec le token JavaScript et le pays des appels réussis, puis arrêtez.
Lancez-la de façon planifiée
Un rafraîchissement de catalogue est une liste d’URL produit. Envoyez-la au Crawler avec un callback, laissez-le réguler les appels et réessayer ce que le site refuse, et lisez les résultats depuis le Cloud Storage. La réponse médiane sur ce site est de 2.6s.
Questions
Ai-je besoin d’un browser pour scraper rei.com ?
Non. 91.7% des appels avec le token simple réussissent et les comptes envoient 99.9% de leur trafic sans browser.
Combien coûte une page rei.com sur Crawlbase ?
1 crédit sans browser. rei.com est dans le tier standard.
Quel country dois-je définir pour rei.com ?
Aucun n’est nécessaire : la plupart des appels réussis le laissent vide.
Autres pages sur rei.com
Pages que rei.com liste dans ses propres sitemaps, récupérées par Crawlbase le 6 sept. 2026 et vérifiées sur 2 passages consécutifs. Chaque ligne est l’appel le moins cher qui a renvoyé la page avec son contenu.
| Page | Exemple | Token | Pays | Médiane |
|---|---|---|---|---|
Accueil/Données structurées : Organization, WebSite | rei.com/ | Simple | aucun | 9.7s |
Page détail/product/{id}/{slug}Données structurées : Product, BreadcrumbList | rei.com/product/206749/camp-daisy-twist | Simple | aucun | 3.5s |
Liste/{slug}/{slug}/c | aucun | Simple | aucun | 2.6s |
Autre/{slug}/{slug} | aucun | Simple | aucun | 2.3s |
Les noms de sites identifient les pages qu’une recette récupère. Crawlbase n’est affilié à aucun site listé. Utilisez les recettes dans le cadre de la politique d’utilisation acceptable.Chiffres mesurés de août 2026, actualisés chaque mois