crawlbaseDocs
Se connecter

Avis & Q&A

Sept scrapers pour les plateformes d'avis et les communautés de questions-réponses. Récupérez des avis structurés et des fils de réponses sans lutter contre les changements de balisage.

Aperçu

Les pages d''avis et de Q&A portent une partie du contenu généré par les utilisateurs le plus riche en signal du web - retours produit vérifiés, réponses issues de l''expérience vécue et le langage que les vrais clients emploient pour décrire leurs problèmes. Ces scrapers transforment ce contenu en JSON que vous pouvez injecter dans des LLM, des modèles de sentiment ou des tableaux de bord de recherche produit sans scraper chaque domaine à la main.

Cas d''usage courants :

  • Recherche produit : faites ressortir les vrais avantages/inconvénients depuis g2-product-reviews pour une catégorie que vous abordez ou un concurrent que vous évaluez.
  • Analytique VoC (voix du client) : injectez les avis d''acheteurs vérifiés dans un modèle de sentiment et segmentez par rôle du rédacteur / taille d''entreprise pour repérer quels profils de clients adorent ou détestent une fonctionnalité.
  • Découverte de contenu : parcourez les fils quora-question pour trouver la formulation exacte que les acheteurs utilisent pour décrire le problème que votre produit résout - matière première pour le texte des landing pages et le SEO.
  • Entraînement IA : constituez un index de récupération de paires Q&A de haute qualité pour un moteur de réponse ou un copilote spécialisé.

Les scrapers G2 et Quora gèrent la pagination en interne - un seul appel produit G2 renvoie la distribution des notes et le lot d''avis visibles ; passez page pour les pages plus anciennes. Les fils Quora renvoient la question + toutes les réponses chargées en une seule fois. Les scrapers Product Hunt renvoient les lancements classés d''un leaderboard ou les upvotes, makers, thèmes et avis d''un seul produit en un appel.

G2

Avis de produits logiciels G2. Renvoie la note globale, le nombre total d'avis, la distribution des notes et les avis analysés, y compris le rôle du rédacteur et la taille de l'entreprise là où G2 les affiche.

  • G2 Product Reviews - avis de produits logiciels sur G2, distribution des notes, avis individuels, avantages/inconvénients.

Quora

Pages de questions Quora - la question, toutes les réponses, les informations sur les auteurs et les compteurs d'engagement.

Product Hunt

Pages de lancement Product Hunt - leaderboards quotidiens et hebdomadaires ainsi que pages de produits individuels avec upvotes, makers, thèmes et avis.

Stack Exchange

Q&A du réseau Stack Exchange - listes de questions et fils de questions complets sur Stack Overflow, Super User, Ask Ubuntu, Server Fault, MathOverflow et chaque site *.stackexchange.com. Un analyseur par type de page, agnostique à l'hôte sur tout le réseau.

  • Stack Exchange Questions - une page de questions, de tags ou de résultats de recherche sous forme de tableau structuré avec scores, nombres de réponses et de vues, tags et pagination.
  • Stack Exchange Thread - une question unique avec son corps complet ainsi que chaque réponse et commentaire, avec scores, état accepté et auteurs.

Exemple d'appel

Ci-dessous : un seul appel g2-product-reviews. La réponse porte les agrégats au niveau du produit ainsi qu'un lot d'avis analysés - titre, note, rôle du rédacteur et taille de l'entreprise.

curl 'https://api.crawlbase.com/?token=YOUR_TOKEN' \
  --data-urlencode 'url=https://www.g2.com/products/zoom/reviews' \
  --data-urlencode 'scraper=g2-product-reviews' -G

Exemple de réponse

{
  "product_name": "Zoom",
  "overall_rating": 4.5,
  "total_reviews": 52840,
  "reviews": [
    {
      "title": "Reliable for daily standups",
      "rating": 4.5,
      "reviewer_role": "Engineering Manager",
      "reviewer_company_size": "51-200 employees"
    }
  ]
}

Référence complète (paramètres, les 4 langages SDK, cas particuliers) : G2 Product Reviews, référence complète