Crawlbase 文档

# Webhook en cours de développement

Le webhook est un webhook bien connu.

您的服务器 webhook 应该...

  • 可公开联系 Crawlbase 台服务器
  • Informations complémentaires POST 200 jours de vacances et de divertissement
  • 200 dollars de réduction 200, 201 or 204 Le monde est en danger

数据的结构方式取决于您在使用格式参数推送 URL 时指定的格式， &format=html (Ce qui suit est une traduction automatique) &format=json.

Celui-là Crawler 引擎将通过以下方式将数据发送回你的回调端点 POST Plus de détails gzip Non.

注: 确保您的回拨随时可用。每次我们交付给您的回调并且您的服务器未能返回成功的响应时，我们都会重试抓取该页面，然后再次重试交付。这些重试被认为是成功的请求，因此需要付费。

注: 如果您使用 Webhook Zapier， Crawler 不发送压缩数据。Zapier 钩子不适用于 Gzip 压缩。

# 请求示例

在这里找到你可以从 Crawlbase Crawler Le webhook de la version bêta est désactivé.

# Traduction en HTML

quand vous utilisez &format=html.

Headers:
  "Content-Type" => "text/plain"
  "Content-Encoding" => "gzip"
  "Original-Status" => 200
  "PC-Status" => 200
  "rid" => "The RID you received in the push call"
  "url" => "The URL which was crawled"

Body:
  The HTML of the page

# Traduction JSON

quand vous utilisez &format=json.

Headers:
  "Content-Type" => "gzip/json"
  "Content-Encoding" => "gzip"

Body:
{
  pc_status: 200,
  original_status: 200,
  rid: "The RID you received in the push call",
  url: "The URL which was crawled",
  body: "The HTML of the page"
}

请 注意: pc_status et original_status 必须检查。 你可以阅读更多关于他们的信息 Cliquez ici et Cliquez ici .

# Le mot clé est

Il s'agit d'un webhook 时，查看特定 URL 的确切响应会很有帮助。

为了帮助测试，您可以配置 Crawlbase Storage 在您的爬虫程序中用于测试目的。您可以 看到它在这里 (打开新窗口) (ouvre une nouvelle fenêtre).

# 监控机器人

Celui-là Crawler URL du webhook associée à l'URL du webhook Crawler Il s'agit d'un webhook basé sur un webhook.

Le webhook est un webhook de qualité. 200 Le monde est différent.

  • 监控请求以带有 json 正文的 POST 请求的形式出现，因为您将收到非监控调用。
  • 监控请求随用户代理一起提供 Crawlbase Monitoring Bot 1.0 所以你可以很容易地用状态忽略它们 200.

# Le site Web de la société de location de voitures de luxe est disponible en anglais.

如果您使用一些随机端点，例如 yourdomain.com/2340JOiow43djoqe21rjosi Le webhook est basé sur le webhook.端点:

  • D'accord 根据您的请求自定义标头 Il s'agit d'un webhook 中检查它是否存在.
  • 使用一些 url L'URL du webhook correspondant est la suivante : yourdomain.com/2340JOiow43djoqe21rjosi?token=1234
  • Accepter seulement POST demande.
  • 检查一些预期的标题（例如 Pc-Status, Original-Status, ridAttendez).

IP de l'IP et IP de l'IP可能会在没有事先通知的情况下更改。

← Crawler Apis →

© 2025 Crawlbase