Cookbook·Actualités et médias·miamiherald.com
Scraper les articles sur miamiherald.com
L’appel qui renvoie les articles de miamiherald.com aujourd’hui, avec les paramètres, les motifs et les modes d’échec lus dans le journal des requêtes depuis le 14 août 2026. Dernier test le 6 sept. 2026.
93.3% de réussite · août 2026Browser sur 7% des appelsPrix Standard · 1 crédit
À propos de miamiherald.com
miamiherald.com se décrit ainsi : « Restez informé des dernières actualités de Miami : criminalité, économie, sports, divertissement et plus encore, à Miami-Dade, dans les Keys et à Broward ».
Ses sitemaps listent 9 068 URL dans 19 fichiers (update). 68 des 9 068 entrées datées ont changé au cours des 30 derniers jours, la plus récente le 6 sept. 2026.
Son robots.txt nomme 13 sitemaps et interdit 12 chemins, dont /search, /web, /mrcontent. Il demande aux crawlers d’attendre 3s entre les requêtes.
Mesuré sur Crawlbase
Taux de réussite sur chaque requête de chaque compte en août 2026 : 93.3%. Motifs, pays et échecs viennent du journal des requêtes depuis le 14 août 2026 ; 6.8% des appels réussis ont utilisé le token JavaScript et la réponse médiane a pris 1.3s.
Parmi les 74 sites actualités et médias du Cookbook, miamiherald.com se place 66 sur 74 au taux de réussite ; la médiane de la catégorie est de 98.9%. Sa réponse médiane de 1.3s est plus rapide que la médiane de la catégorie, 2.3s. 58 des 74 acceptent le token simple ; celui-ci seulement sur certaines pages.
L’appel
Les pages d’article sont la forme que les comptes récupèrent le plus ici, avec le pays et le token qui réussissent le plus souvent. Remplacez le chemin fictif par une vraie URL d’article du site.
curl "https://api.crawlbase.com/?token=YOUR_TOKEN&url=https%3A%2F%2Fwww.miamiherald.com%2Fnews%2Fstate%2Farticle2629551.html"from crawlbase import CrawlingAPI api = CrawlingAPI({'token': 'YOUR_TOKEN'}) r = api.get('https://www.miamiherald.com/news/state/article2629551.html') html = r['body']
const { CrawlingAPI } = require('crawlbase'); const api = new CrawlingAPI({ token: 'YOUR_TOKEN' }); const r = await api.get('https://www.miamiherald.com/news/state/article2629551.html');
Les paramètres qui comptent
| Paramètre | Valeur | Pourquoi |
|---|---|---|
country | laisser vide | La plupart des appels réussis ne définissent aucun country (99.4%) et réussissent à 93.5%. |
javascript | laisser vide | Les appels avec le token simple réussissent à 93.5% et représentent 92.8% du trafic. Un browser coûte plus cher et, sur ce site, n’apporte rien. |
Motifs d’URL que les comptes récupèrent
| Motif | Part des réussites | Token JavaScript | Country | Paramètres de requête |
|---|---|---|---|---|
/news/{slug}/{slug} | 48.0% | 0.0% | aucun | aucun |
/sports/{slug}/{slug} | 28.8% | 0.0% | aucun | aucun |
/living/{slug} | 9.3% | 0.0% | aucun | aucun |
/opinion/{slug}/{slug} | 3.5% | 0.0% | aucun | aucun |
/{slug}/{slug}/{slug} | 3.0% | 8.3% | aucun | aucun |
Les champs que vous obtenez
Données structurées que Crawlbase a trouvées sur miamiherald.com, par type de page. Ce sont les types schema.org de la page, les champs que votre parseur peut lire directement dans le bloc JSON-LD :
- Accueil:
NewsMediaOrganization - Article:
NewsArticle - Autre:
NewsArticle
Ce qui casse, et la solution
Sur les échecs depuis le 14 août 2026, le site a répondu :
403 : 44.8% des échecs Un 403 est le site qui refuse la sortie. Définissez le country utilisé par les appels réussis et réessayez une fois ; un second 403 signifie que l’URL elle-même est protégée.
0 : 25.4% des échecs Un statut 0 est un request qui n’a jamais reçu de réponse dans le timeout. Réessayez une fois avec le token JavaScript si le motif a besoin d’un browser.
408 : 20.9% des échecs 408 signifie que le site a refusé la récupération. Traitez-le comme un blocage : réessayez une fois avec le token JavaScript et le pays des appels réussis, puis arrêtez.
Lancez-la de façon planifiée
L’actualité bouge d’heure en heure. Interrogez la rubrique ou le sitemap pour les nouveaux liens, puis envoyez les URL d’articles au Crawler avec un callback pour que les récupérations soient régulées. La réponse médiane sur ce site est de 1.3s.
Questions
Ai-je besoin d’un browser pour scraper miamiherald.com ?
Non. 93.5% des appels avec le token simple réussissent et les comptes envoient 92.8% de leur trafic sans browser.
Combien coûte une page miamiherald.com sur Crawlbase ?
1 crédit sans browser. miamiherald.com est dans le tier standard.
Quel country dois-je définir pour miamiherald.com ?
Aucun n’est nécessaire : la plupart des appels réussis le laissent vide.
Autres pages sur miamiherald.com
Pages que miamiherald.com liste dans ses propres sitemaps, récupérées par Crawlbase le 6 sept. 2026 et vérifiées sur 2 passages consécutifs. Chaque ligne est l’appel le moins cher qui a renvoyé la page avec son contenu.
| Page | Exemple | Token | Pays | Médiane |
|---|---|---|---|---|
Accueil/Données structurées : NewsMediaOrganization | miamiherald.com/ | Simple | aucun | 2.1s |
Article/news/{slug}/{slug}Données structurées : NewsArticle | miamiherald.com/news/state/article2629551.html | JavaScript | aucun | 11.9s |
Autre/{slug}/{slug}/{slug}Données structurées : NewsArticle | aucun | Simple | aucun | 3.9s |
Les noms de sites identifient les pages qu’une recette récupère. Crawlbase n’est affilié à aucun site listé. Utilisez les recettes dans le cadre de la politique d’utilisation acceptable.Chiffres mesurés de août 2026, actualisés chaque mois