Scraper duckduckgo.com
L’appel qui renvoie les pages de duckduckgo.com aujourd’hui, avec les paramètres, les motifs et les modes d’échec lus dans le journal des requêtes depuis le 14 août 2026. Dernier test le 6 sept. 2026.
À propos de duckduckgo.com
duckduckgo.com se décrit ainsi : « L’entreprise de confidentialité sur Internet qui vous permet de reprendre facilement le contrôle de vos informations personnelles en ligne, sans aucun compromis ».
Sa page d’accueil déclare 12 langues : af-za, be-by, bg-bg, cs-cz, da-dk, de-de, el-gr, en-us, es-es, et-ee, fi-fi, fr-fr.
Ses sitemaps listent 318 URL dans 2 fichiers. 292 des 317 entrées datées ont changé au cours des 30 derniers jours, la plus récente le 3 sept. 2026.
Son robots.txt nomme 2 sitemaps et interdit 6 chemins, dont /lite, /html, /email/.
Mesuré sur Crawlbase
Taux de réussite sur chaque requête de chaque compte en août 2026 : 95.9%. Motifs, pays et échecs viennent du journal des requêtes depuis le 14 août 2026 ; 0.0% des appels réussis ont utilisé le token JavaScript et la réponse médiane a pris 2.1s.
Parmi les 11 sites tech et développeurs du Cookbook, duckduckgo.com se place 8 sur 11 au taux de réussite ; la médiane de la catégorie est de 97.8%. Sa réponse médiane de 2.1s est au niveau de la médiane de la catégorie, 1.9s. 8 des 11 acceptent le token simple, celui-ci compris.
L’appel
La forme d’URL la plus courante que les comptes récupèrent, avec le country et le token qui réussissent le plus souvent. Remplacez le chemin fictif par un vrai chemin du site.
curl "https://api.crawlbase.com/?token=YOUR_TOKEN&url=https%3A%2F%2Fwww.duckduckgo.com%2Fexample-page"from crawlbase import CrawlingAPI api = CrawlingAPI({'token': 'YOUR_TOKEN'}) r = api.get('https://www.duckduckgo.com/example-page') html = r['body']
const { CrawlingAPI } = require('crawlbase'); const api = new CrawlingAPI({ token: 'YOUR_TOKEN' }); const r = await api.get('https://www.duckduckgo.com/example-page');
Les paramètres qui comptent
| Paramètre | Valeur | Pourquoi |
|---|---|---|
country | laisser vide | La plupart des appels réussis ne définissent aucun country (100%) et réussissent à 96.7%. |
javascript | laisser vide | Les appels avec le token simple réussissent à 97.4% et représentent 99.3% du trafic. Un browser coûte plus cher et, sur ce site, n’apporte rien. |
Motifs d’URL que les comptes récupèrent
| Motif | Part des réussites | Token JavaScript | Country | Paramètres de requête |
|---|---|---|---|---|
/{slug} | 100% | 0.0% | aucun | q |
Les champs que vous obtenez
Les champs dépendent du type de page. Les pages produit portent en général un bloc ld+json avec nom, prix, devise et disponibilité, les pages article un titre et un corps ; vérifiez la première réponse obtenue.
Ce qui casse, et la solution
Sur les échecs depuis le 14 août 2026, le site a répondu :
Lancez-la de façon planifiée
La réponse médiane sur ce site est de 2.1s. Envoyez une liste d’URL au Crawler avec un callback pour tout ce qui dépasse quelques milliers de pages par jour ; il régule les appels et réessaie ce que le site refuse.
Questions
Ai-je besoin d’un browser pour scraper duckduckgo.com ?
Non. 97.4% des appels avec le token simple réussissent et les comptes envoient 99.3% de leur trafic sans browser.
Combien coûte une page duckduckgo.com sur Crawlbase ?
1 crédit sans browser. duckduckgo.com est dans le tier standard.
Quel country dois-je définir pour duckduckgo.com ?
Aucun n’est nécessaire : la plupart des appels réussis le laissent vide.
Autres pages sur duckduckgo.com
Pages que duckduckgo.com liste dans ses propres sitemaps, récupérées par Crawlbase le 6 sept. 2026 et vérifiées sur 2 passages consécutifs. Chaque ligne est l’appel le moins cher qui a renvoyé la page avec son contenu.
| Page | Exemple | Token | Pays | Médiane |
|---|---|---|---|---|
Accueil/ | duckduckgo.com/ | Simple | aucun | 6.5s |