# La société Crawling API en minutes

Nous avons créé une API pour que l'intégration de Crawlbase dans votre projet Crawling soit parfaitement efficace.

# Votre première découverte API

Toutes les URL API commencent avec les bases suivantes : https://api.crawlbase.com

Daher ist Ihr erster Anruf so einfach wie das Ausführen der folgenden Zeile im Terminal.
Essayez le!

curl 'https://api.crawlbase.com/?token=_USER_TOKEN_&url=https%3A%2F%2Fgithub.com%2Fcrawlbase%3Ftab%3Drepositories'

L'utilisation des jetons normaux n'est pas possible, car le site n'est pas fonctionnel, lorsque le navigateur JavaScript est activé, ou bien l'utilisateur bienveillant de la page client utilisant JavaScript est créé et vous permet d'utiliser votre jeton JavaScript.
Essayez JS-Crawling aus!

curl 'https://api.crawlbase.com/?token=_JS_TOKEN_&url=https%3A%2F%2Fgithub.com%2Fcrawlbase%3Ftab%3Drepositories'

Notez : zur Abwicklung, Integrierung, Speicherung et Lisez maintenant Anfragen werden ebenfalls unterstützt. Bite allez ici Pour plus d'informations ou pour savoir si vous avez les paramètres API forts.

# Essai gratuit

Les 1,000 XNUMX premières factures sont gratuites.

Nutzen Sie die Kostenlose Testversion unbedingt voll aus!

# Limite d'évaluation

L'API est gérée au maximum 20 demandes par seconde, pro Token (Ratenlimit kann auf Anfrage erhöht werden).

Das bedeutet, Sie können senden jusqu'à 20 Anfragen pro Sekunde, le heißt rund 51 Millionen Anfragen pro Monat, sans avoir à accrocher les fils de discussion utilisés.

La réponse de l'API avec 429 Code d'état, lorsque la limite de taux est indiquée.

Remarque: Einige bestimmte Websites haben möglicherweise niedrigere Limites. Si vous êtes à la recherche de ces limites supérieures, Contacts d'assistance (öffnet neues Fenster) (ouvre une nouvelle fenêtre).

# Réponses API

La réponse durchschnittliche API dure 4 à 10 et XNUMX secondes, mais nous recommandons Appliquez un délai d'attente pour la durée d'attente de 90 secondes.

# Erfolg vs. Versagen

Wir berechnen nur erfolgreiche Anfragen (sihe Statut originel et Statut du PC dans les paramètres de réponse unten).

# Plus d'informations

• Si vous aimez une bibliothèque d'intégration de Crawlbase, trouvez-la ici API-Bibliotheken hier (öffnet neues Fenster) (ouvre une nouvelle fenêtre).
• Ceci est utilisé pour utiliser Accept-Encoding-Gzip-Header.
• Lorsque vous utilisez Scrapy pour Python, vous devez toujours le faire, Désactiver le cache DNS (öffnet neues Fenster) (ouvre une nouvelle fenêtre).

# Authentifizierung

L'utilisation de l'API ne nécessite pas d'authentification.
Vous avez deux jetons : un pour une connexion normale et une pour une connexion JavaScript (navigateur spécifique).