Scraper les pages talk sur mumsnet.com

Mesuré sur Crawlbase

Taux de réussite sur chaque requête de chaque compte en August 2026 : 98.9%. Motifs, pays et échecs viennent du journal des requêtes depuis le 14 Aug 2026 ; 0.1% des appels réussis ont utilisé le token JavaScript et la réponse médiane a pris 9.2s.

Parmi les 8 sites réseaux sociaux du Cookbook, mumsnet.com se place 4 sur 8 au taux de réussite ; la médiane de la catégorie est de 98.9%. Sa réponse médiane de 9.2s est au niveau de la médiane de la catégorie, 9.2s. 6 des 8 acceptent le token simple, celui-ci compris.

L’appel

La forme d’URL la plus courante que les comptes récupèrent, avec le country et le token qui réussissent le plus souvent. Remplacez le chemin fictif par un vrai chemin du site.

curl "https://api.crawlbase.com/?token=YOUR_TOKEN&url=https%3A%2F%2Fwww.mumsnet.com%2Ftalk%2Fexample-page%2Fexample-page"

from crawlbase import CrawlingAPI
api = CrawlingAPI({'token': 'YOUR_TOKEN'})

r = api.get('https://www.mumsnet.com/talk/example-page/example-page')
html = r['body']

const { CrawlingAPI } = require('crawlbase');
const api = new CrawlingAPI({ token: 'YOUR_TOKEN' });

const r = await api.get('https://www.mumsnet.com/talk/example-page/example-page');

Les paramètres qui comptent

Motifs d’URL que les comptes récupèrent

Les champs que vous obtenez

Les champs dépendent du type de page. Les pages produit portent en général un bloc ld+json avec nom, prix, devise et disponibilité, les pages article un titre et un corps ; vérifiez la première réponse obtenue.

Ce qui casse, et la solution

Lancez-la de façon planifiée

La réponse médiane sur ce site est de 9.2s. Envoyez une liste d’URL au Crawler avec un callback pour tout ce qui dépasse quelques milliers de pages par jour ; il régule les appels et réessaie ce que le site refuse.

Questions