Cookbook·Données publiques·nysenate.gov
Scraper nysenate.gov
L’appel qui renvoie les pages de nysenate.gov aujourd’hui, avec les paramètres, les motifs et les modes d’échec lus dans le journal des requêtes depuis le 14 août 2026. Dernier test le 6 sept. 2026.
92.5% de réussite · août 2026Browser nécessairePrix Standard · 1 crédit
À propos de nysenate.gov
nysenate.gov se décrit ainsi : « NYSenate.gov est conçu pour accroître la participation du public au processus législatif. En facilitant une communication efficace entre les New-Yorkais et les sénateurs qui les représentent, les législateurs peuvent élaborer de meilleures lois pour nous gouverner ».
Ses sitemaps listent 70 000 URL dans 7 fichiers. 0 des 70 000 entrées datées ont changé au cours des 30 derniers jours, la plus récente le 11 févr. 2026.
Son robots.txt interdit 12 chemins, dont /core/, /profiles/, /admin/.
Mesuré sur Crawlbase
Taux de réussite sur chaque requête de chaque compte en août 2026 : 92.5%. Motifs, pays et échecs viennent du journal des requêtes depuis le 14 août 2026 ; 99.9% des appels réussis ont utilisé le token JavaScript et la réponse médiane a pris 33.4s.
Parmi les 11 sites données publiques du Cookbook, nysenate.gov se place 9 sur 11 au taux de réussite ; la médiane de la catégorie est de 97.2%. Sa réponse médiane de 33.4s est plus lente que la médiane de la catégorie, 2.3s. 5 des 11 acceptent le token simple ; celui-ci demande le token JavaScript.
L’appel
La forme d’URL la plus courante que les comptes récupèrent, avec le country et le token qui réussissent le plus souvent. Remplacez le chemin fictif par un vrai chemin du site.
curl "https://api.crawlbase.com/?token=YOUR_JS_TOKEN&url=https%3A%2F%2Fwww.nysenate.gov%2Fexample-section%2Fexample-page"from crawlbase import CrawlingAPI api = CrawlingAPI({'token': 'YOUR_JS_TOKEN'}) r = api.get('https://www.nysenate.gov/example-section/example-page') html = r['body']
const { CrawlingAPI } = require('crawlbase'); const api = new CrawlingAPI({ token: 'YOUR_JS_TOKEN' }); const r = await api.get('https://www.nysenate.gov/example-section/example-page');
Les paramètres qui comptent
| Paramètre | Valeur | Pourquoi |
|---|---|---|
country | laisser vide | La plupart des appels réussis ne définissent aucun country (99.9%) et réussissent à 93.0%. |
javascript | utiliser le token JavaScript | 99.8% des appels utilisent le token JavaScript et réussissent à 93.1%. Le token simple a été essayé trop rarement (6 appels) pour en dire quoi que ce soit. |
Motifs d’URL que les comptes récupèrent
| Motif | Part des réussites | Token JavaScript | Country | Paramètres de requête |
|---|---|---|---|---|
/{slug}/{slug} | 85.5% | 100% | aucun | aucun |
/{slug}/{slug}/{slug} | 13.0% | 100% | aucun | aucun |
Les champs que vous obtenez
Les champs dépendent du type de page. Les pages produit portent en général un bloc ld+json avec nom, prix, devise et disponibilité, les pages article un titre et un corps ; vérifiez la première réponse obtenue.
Ce qui casse, et la solution
Sur les échecs depuis le 14 août 2026, le site a répondu :
0 : 20.4% des échecs Un statut 0 est un request qui n’a jamais reçu de réponse dans le timeout. Réessayez une fois avec le token JavaScript si le motif a besoin d’un browser.
403 : 18.1% des échecs Un 403 est le site qui refuse la sortie. Définissez le country utilisé par les appels réussis et réessayez une fois ; un second 403 signifie que l’URL elle-même est protégée.
530, 594, 500 : 41.1% des échecs ensemble Un 5xx est le site qui échoue, pas la récupération. Réessayez après une minute.
Lancez-la de façon planifiée
La réponse médiane sur ce site est de 33.4s. Envoyez une liste d’URL au Crawler avec un callback pour tout ce qui dépasse quelques milliers de pages par jour ; il régule les appels et réessaie ce que le site refuse.
Questions
Ai-je besoin d’un browser pour scraper nysenate.gov ?
Oui pour la plupart des pages. Les appels avec le token JavaScript réussissent à 93.1% tandis que ceux avec le token simple atteignent 66.7%.
Combien coûte une page nysenate.gov sur Crawlbase ?
1 crédit sans browser. nysenate.gov est dans le tier standard.
Quel country dois-je définir pour nysenate.gov ?
Aucun n’est nécessaire : la plupart des appels réussis le laissent vide.
Autres pages sur nysenate.gov
Pages que nysenate.gov liste dans ses propres sitemaps, récupérées par Crawlbase le 6 sept. 2026 et vérifiées sur 2 passages consécutifs. Chaque ligne est l’appel le moins cher qui a renvoyé la page avec son contenu.
| Page | Exemple | Token | Pays | Médiane |
|---|---|---|---|---|
Accueil/ | nysenate.gov/ | Simple | aucun | 38.5s |
Les noms de sites identifient les pages qu’une recette récupère. Crawlbase n’est affilié à aucun site listé. Utilisez les recettes dans le cadre de la politique d’utilisation acceptable.Chiffres mesurés de août 2026, actualisés chaque mois