Scraper les pages catégorie sur oreillyauto.com

Mesuré sur Crawlbase

Taux de réussite sur chaque requête de chaque compte en August 2026 : 99.0%. Motifs, pays et échecs viennent du journal des requêtes depuis le 14 Aug 2026 ; 100% des appels réussis ont utilisé le token JavaScript et la réponse médiane a pris 46.5s.

Parmi les 16 sites automobile du Cookbook, oreillyauto.com se place 10 sur 16 au taux de réussite ; la médiane de la catégorie est de 99.3%. Sa réponse médiane de 46.5s est plus lente que la médiane de la catégorie, 1.9s. 12 des 16 acceptent le token simple ; celui-ci demande le token JavaScript.

L’appel

Les pages de catégorie et de liste sont la forme que les comptes récupèrent le plus ici, avec le pays et le token qui réussissent le plus souvent. Remplacez le chemin fictif par une vraie URL de rubrique du site.

curl "https://api.crawlbase.com/?token=YOUR_JS_TOKEN&url=https%3A%2F%2Fwww.oreillyauto.com%2Fdetail%2Fc%2Fexample-page"

from crawlbase import CrawlingAPI
api = CrawlingAPI({'token': 'YOUR_JS_TOKEN'})

r = api.get('https://www.oreillyauto.com/detail/c/example-page')
html = r['body']

const { CrawlingAPI } = require('crawlbase');
const api = new CrawlingAPI({ token: 'YOUR_JS_TOKEN' });

const r = await api.get('https://www.oreillyauto.com/detail/c/example-page');

Les paramètres qui comptent

Motifs d’URL que les comptes récupèrent

Les champs que vous obtenez

Une page de liste porte les éléments d’une rubrique, chacun avec un titre, un lien et souvent un prix, plus la pagination. Le détail est sur la page de l’élément ; ne la récupérez que pour ceux dont vous avez besoin.

Ce qui casse, et la solution

Sur les échecs depuis le 14 Aug 2026, le site a répondu :

Lancez-la de façon planifiée

Parcourez les listes à une cadence pour trouver les nouveaux éléments, puis envoyez leurs URL au Crawler avec un callback ; il régule les appels et réessaie ce que le site refuse. La réponse médiane sur ce site est de 46.5s.

Questions