crawlbaseDocs
Anmelden

Übersicht

Reviews- und Q&A-Seiten tragen einige der signalstärksten nutzergenerierten Inhalte im Web - verifiziertes Produktfeedback, Antworten aus gelebter Erfahrung und die Sprache, die echte Kunden zur Beschreibung von Problemen verwenden. Diese Scraper verwandeln diese Inhalte in JSON, das Sie in LLMs, Sentiment-Modelle oder Produktforschungs-Dashboards einspeisen können, ohne jede Domain von Hand zu scrapen.

Typische Anwendungsfälle:

  • Produktforschung: echte Vor-/Nachteile aus g2-product-reviews für eine Kategorie, in die Sie einsteigen, oder einen Wettbewerber, den Sie einschätzen, sichtbar machen.
  • VoC-Analytik (Voice of Customer): Bewertungen verifizierter Käufer in ein Sentiment-Modell einspeisen und nach Rezensenten-Rolle / Unternehmensgröße segmentieren, um herauszufinden, welche Kundenprofile ein Feature lieben oder hassen.
  • Content-Discovery: quora-question-Threads durchgehen, um die genaue Formulierung zu finden, die Käufer bei der Beschreibung des Problems verwenden, das Ihr Produkt löst - Input für Landingpage-Texte und SEO.
  • KI-Training: einen Retrieval-Index aus hochwertigen Q&A-Paaren für eine Answer-Engine oder einen domänenspezifischen Copilot aufbauen.

Die G2- und Quora-Scraper übernehmen die Pagination intern - ein einzelner G2-Produktaufruf liefert die Bewertungsverteilung und die sichtbare Review-Charge; übergeben Sie page für ältere Seiten. Quora-Threads liefern die Frage + alle geladenen Antworten in einem Zug. Die Product-Hunt-Scraper liefern die gerankten Launches eines Leaderboards oder die Upvotes, Maker, Topics und Reviews eines einzelnen Produkts in einem Aufruf.

G2

G2-Software-Produktbewertungen. Liefert die Gesamtbewertung, die Gesamtzahl der Reviews, die Bewertungsverteilung und die geparsten Reviews, inklusive Rezensenten-Rolle und Unternehmensgröße, wo G2 sie anzeigt.

  • G2 Product Reviews - Software-Produktbewertungen auf G2, Bewertungsverteilung, einzelne Reviews, Vor-/Nachteile.

Quora

Quora-Fragenseiten - die Frage, alle Antworten, Autoreninfos und Engagement-Zahlen.

Product Hunt

Product-Hunt-Launch-Seiten - tägliche und wöchentliche Leaderboards plus einzelne Produktseiten mit Upvotes, Makern, Topics und Reviews.

Stack Exchange

Q&A des Stack-Exchange-Netzwerks - Fragenlisten und vollständige Frage-Threads über Stack Overflow, Super User, Ask Ubuntu, Server Fault, MathOverflow und jede *.stackexchange.com-Site. Ein Parser pro Seitentyp, host-agnostisch über das gesamte Netzwerk.

  • Stack Exchange Questions - eine Fragen-, Tag- oder Suchergebnisseite als strukturiertes Array mit Scores, Antwort- und Aufrufzahlen, Tags und Pagination.
  • Stack Exchange Thread - eine einzelne Frage mit ihrem vollständigen Text plus jeder Antwort und jedem Kommentar, mit Scores, Akzeptiert-Status und Autoren.

Beispielaufruf

Nachfolgend: ein einzelner g2-product-reviews-Aufruf. Die Response trägt die Aggregate auf Produktebene plus eine geparste Review-Charge - Titel, Bewertung, Rezensenten-Rolle und Unternehmensgröße.

curl 'https://api.crawlbase.com/?token=YOUR_TOKEN' \
  --data-urlencode 'url=https://www.g2.com/products/zoom/reviews' \
  --data-urlencode 'scraper=g2-product-reviews' -G

Beispielantwort

{
  "product_name": "Zoom",
  "overall_rating": 4.5,
  "total_reviews": 52840,
  "reviews": [
    {
      "title": "Reliable for daily standups",
      "rating": 4.5,
      "reviewer_role": "Engineering Manager",
      "reviewer_company_size": "51-200 employees"
    }
  ]
}

Vollständige Referenz (Parameter, alle 4 SDK-Sprachen, Sonderfälle): G2 Product Reviews, vollständige Referenz