Scraper les pages catégorie sur betta.com.au

À propos de betta.com.au

betta.com.au se décrit ainsi : « Découvrez les meilleures offres d’électroménager et de meubles en Australie ! De la buanderie à la cuisine en passant par l’électronique et plus encore, achetez en ligne ou en magasin chez Betta dès aujourd’hui ».

Ses sitemaps listent 6 533 URL dans 11 fichiers (agentic_discovery, products_1, products_2, products_3, products_4, products_5). 5 902 des 6 531 entrées datées ont changé au cours des 30 derniers jours, la plus récente le 7 sept. 2026.

Son robots.txt nomme 1 sitemap et interdit 12 chemins, dont /admin, /cart, /orders. Il demande aux crawlers d’attendre 10s entre les requêtes.

Mesuré sur Crawlbase

Taux de réussite sur chaque requête de chaque compte en août 2026 : 99.5%. Motifs, pays et échecs viennent du journal des requêtes depuis le 14 août 2026 ; 0.4% des appels réussis ont utilisé le token JavaScript et la réponse médiane a pris 1.2s.

Parmi les 28 sites électronique du Cookbook, betta.com.au se place 14 sur 28 au taux de réussite ; la médiane de la catégorie est de 99.5%. Sa réponse médiane de 1.2s est plus rapide que la médiane de la catégorie, 2.0s. 14 des 28 acceptent le token simple, celui-ci compris.

L’appel

Les pages de catégorie et de liste sont la forme que les comptes récupèrent le plus ici, avec le pays et le token qui réussissent le plus souvent. Remplacez le chemin fictif par une vraie URL de rubrique du site.

curl "https://api.crawlbase.com/?token=YOUR_TOKEN&url=https%3A%2F%2Fwww.betta.com.au%2Fcollections%2Fipad"

from crawlbase import CrawlingAPI
api = CrawlingAPI({'token': 'YOUR_TOKEN'})

r = api.get('https://www.betta.com.au/collections/ipad')
html = r['body']

const { CrawlingAPI } = require('crawlbase');
const api = new CrawlingAPI({ token: 'YOUR_TOKEN' });

const r = await api.get('https://www.betta.com.au/collections/ipad');

Les paramètres qui comptent

Motifs d’URL que les comptes récupèrent

Les champs que vous obtenez

Données structurées que Crawlbase a trouvées sur betta.com.au, par type de page. Ce sont les types schema.org de la page, les champs que votre parseur peut lire directement dans le bloc JSON-LD :

• Accueil: Organization, WebSite
• Page détail: Organization, WebSite, Product
• Liste: Organization, WebSite
• Autre: Organization, WebSite

Ce qui casse, et la solution

Lancez-la de façon planifiée

Parcourez les listes à une cadence pour trouver les nouveaux éléments, puis envoyez leurs URL au Crawler avec un callback ; il régule les appels et réessaie ce que le site refuse. La réponse médiane sur ce site est de 1.2s.

Questions

Autres pages sur betta.com.au

Pages que betta.com.au liste dans ses propres sitemaps, récupérées par Crawlbase le 6 sept. 2026 et vérifiées sur 2 passages consécutifs. Chaque ligne est l’appel le moins cher qui a renvoyé la page avec son contenu.