crawlbaseDocs
Se connecter

Aperçu

Les scrapers de réseaux sociaux couvrent les surfaces publiques des cinq plateformes dont la plupart des équipes extraient des données : Facebook, Instagram, TikTok, LinkedIn et Reddit. Chaque scraper cible un type de page - profil, publication, hashtag, événement, fil, listing de subreddit, thread de commentaires - de sorte que la structure du JSON reste prévisible même lorsque l''application sous-jacente remanie son interface. Nous gérons l''anti-bot, la limitation de débit et le routage résidentiel ; vous recevez la structure analysée.

Cas d''usage courants :

  • Surveillance de marque : interrogez instagram-profile / tiktok-profile pour le nombre d''abonnés, la cadence de publication et les tendances d''engagement chez les concurrents et les influenceurs.
  • Découverte d''influenceurs : parcourez instagram-hashtag ou instagram-reels-audio pour trouver les créateurs utilisant un hashtag donné ou un son tendance.
  • Recrutement / prospection commerciale : enrichissez un CRM avec des données linkedin-profile et linkedin-company - intitulé, effectif, accroche, poste actuel.
  • Marketing événementiel : récupérez la participation et le calendrier de facebook-event pour suivre la saturation événementielle dans une ville ou une verticale sectorielle.
  • Recherche de tendances : injectez tiktok-product et instagram-post dans des pipelines de détection de tendances pour le marketing ou la recherche produit.
  • Recherche communauté & sentiment : récupérez reddit-subreddit et reddit-post pour les publications classées et les arbres de commentaires complets afin de suivre le sentiment, les retours produit et les discussions émergentes.

Seules les surfaces publiques sont prises en charge - le contenu privé ou protégé par connexion est hors périmètre et n''est pas quelque chose que les scrapers tentent d''atteindre. Lorsqu''une plateforme comporte plusieurs types de publications (Instagram a par exemple profil + publication + reel + hashtag), chacun a son propre scraper afin que vous ne payiez pas pour des champs dont vous n''avez pas besoin.

Facebook

Surfaces Facebook publiques - pages, profils, groupes, hashtags, événements. Utile pour la surveillance de marque, le marketing événementiel et la découverte dans les régions où Facebook a une part plus élevée qu'Instagram (la majeure partie de l'EMEA, une partie de l'Amérique latine).

Instagram

Cinq scrapers Instagram couvrant les surfaces les plus pertinentes pour le marketing d'influence et la recherche de tendances - profils, publications et reels individuels, fils de hashtags, et reels-audio pour le suivi de tendances portées par la musique/le son.

TikTok

Profils TikTok et publications vidéo/produit individuelles. Associez-les à tiktok-shop dans la catégorie e-commerce si vous suivez le commerce des créateurs.

LinkedIn

LinkedIn public - profils, pages d'entreprise et publications du fil. Le choix standard pour la prospection B2B, le recrutement et le suivi concurrentiel des effectifs.

Reddit

Surfaces Reddit publiques - listings de subreddits, résultats de recherche et publications individuelles avec leurs arbres de commentaires complets. Le choix pour la surveillance de communautés, l'analyse de sentiment et la détection de tendances à travers des communautés thématiques.

  • Reddit Subreddit - publications classées d'un listing de subreddit (titre, auteur, score, nombre de commentaires, flair, pagination).
  • Reddit Search - résultats de recherche Reddit - publications correspondantes plus subreddits associés.
  • Reddit Post - publication unique avec corps, score, ratio d'upvotes et l'arbre de commentaires imbriqué complet.

Exemple d'appel

Ci-dessous : un seul appel instagram-profile. Le scraper renvoie l'instantané du profil public - nom d'utilisateur, bio, nombres d'abonnés/abonnements, nombre de publications, indicateur de vérification et URL de l'avatar.

curl 'https://api.crawlbase.com/?token=YOUR_TOKEN' \
  --data-urlencode 'url=https://www.instagram.com/apple/' \
  --data-urlencode 'scraper=instagram-profile' -G

Exemple de réponse

{
  "username": "apple",
  "full_name": "Apple",
  "biography": "Welcome to @apple. The latest creativity going on around us.",
  "followers_count": 33800000,
  "following_count": 9,
  "posts_count": 1284,
  "is_verified": true,
  "is_private": false,
  "profile_pic_url": "https://scontent.cdninstagram.com/...jpg"
}

Référence complète (paramètres, les 4 langages SDK, cas particuliers) : Instagram Profile - référence complète