Scraper les pages talk sur mumsnet.com

À propos de mumsnet.com

mumsnet.com se décrit ainsi : « Mumsnet facilite la vie des parents en mettant en commun connaissances, conseils et soutien sur tous les sujets, de la conception à l’accouchement, des bébés aux adolescents ».

Ses sitemaps listent 618 108 URL dans 19 fichiers (news, AMA_1, _chat_1, _chat_2, _chat_3, _chat_4). 4 694 des 618 104 entrées datées ont changé au cours des 30 derniers jours, la plus récente le 6 sept. 2026.

Son robots.txt nomme 3 sitemaps et interdit 12 chemins, dont /session/, /login-needed/, /member/.

Mesuré sur Crawlbase

Taux de réussite sur chaque requête de chaque compte en août 2026 : 98.9%. Motifs, pays et échecs viennent du journal des requêtes depuis le 14 août 2026 ; 0.1% des appels réussis ont utilisé le token JavaScript et la réponse médiane a pris 9.2s.

Parmi les 8 sites réseaux sociaux du Cookbook, mumsnet.com se place 4 sur 8 au taux de réussite ; la médiane de la catégorie est de 98.9%. Sa réponse médiane de 9.2s est au niveau de la médiane de la catégorie, 9.2s. 6 des 8 acceptent le token simple, celui-ci compris.

L’appel

La forme d’URL la plus courante que les comptes récupèrent, avec le country et le token qui réussissent le plus souvent. Remplacez le chemin fictif par un vrai chemin du site.

curl "https://api.crawlbase.com/?token=YOUR_TOKEN&url=https%3A%2F%2Fwww.mumsnet.com%2Ftalk%2Fexample-section%2Fexample-page"

from crawlbase import CrawlingAPI
api = CrawlingAPI({'token': 'YOUR_TOKEN'})

r = api.get('https://www.mumsnet.com/talk/example-section/example-page')
html = r['body']

const { CrawlingAPI } = require('crawlbase');
const api = new CrawlingAPI({ token: 'YOUR_TOKEN' });

const r = await api.get('https://www.mumsnet.com/talk/example-section/example-page');

Les paramètres qui comptent

Motifs d’URL que les comptes récupèrent

Les champs que vous obtenez

Données structurées que Crawlbase a trouvées sur mumsnet.com, par type de page. Ce sont les types schema.org de la page, les champs que votre parseur peut lire directement dans le bloc JSON-LD :

• Accueil: Organization
• Article: Article, BreadcrumbList, Organization
• Autre: Organization, BreadcrumbList, DiscussionForumPosting

Ce qui casse, et la solution

Lancez-la de façon planifiée

La réponse médiane sur ce site est de 9.2s. Envoyez une liste d’URL au Crawler avec un callback pour tout ce qui dépasse quelques milliers de pages par jour ; il régule les appels et réessaie ce que le site refuse.

Questions

Autres pages sur mumsnet.com

Pages que mumsnet.com liste dans ses propres sitemaps, récupérées par Crawlbase le 6 sept. 2026 et vérifiées sur 2 passages consécutifs. Chaque ligne est l’appel le moins cher qui a renvoyé la page avec son contenu.