crawlbaseDocs
Anmelden
Wie Scraper funktionieren

Scraper laufen über die Crawling API. Fügen Sie &scraper=NAME zu einem beliebigen Crawling API-Aufruf hinzu und Sie erhalten geparstes JSON zurück statt rohem HTML. Selbes Token, selbe Rate Limits, selbe Retries - andere Form der Response.

Schnellstart

curl 'https://api.crawlbase.com/?token=YOUR_TOKEN' \
  --data-urlencode 'url=https://www.amazon.com/dp/1098145356' \
  --data-urlencode 'scraper=amazon-product-details' -G

Katalog durchsuchen

Jeder Scraper hat eine eigene Seite mit Eingabeformat, Ausgabeschema und Code-Beispielen in mehreren Sprachen. Klicken Sie auf einen Namen unten, um alle Details zu sehen.

Amazon

Produktdetails, Suchergebnisse, Rezensionen, Bestseller, Neuerscheinungen.

Google

Ergebnisseiten der Suchmaschine mit allen SERP-Funktionen sowie Shopping-Produktangebote.

Facebook

Öffentliche Gruppen, Seiten, Profile, Hashtags, Events. JS Token empfohlen.

Instagram

Reels, Beiträge, Profile, Hashtags, Audio-Aggregationen. JS Token empfohlen.

TikTok

Shop, Produkte, Profile. Rezensionen, Preise, Verkäufermetriken, verwandte Videos.

LinkedIn

Profile, Unternehmen, öffentliche Feeds. Holen Sie sich Berufserfahrung, Ausbildung, Skills, Mitarbeiterzahlen und mehr.

Quora

Airbnb

eBay

AliExpress

Galaxus

Bing

Immobilienscout24

Walmart

Best Buy

G2

Eventbrite

GitHub

Scraper für die Entwicklerplattform GitHub - Repository-Seiten, Repository-Suchergebnisse und Benutzer- oder Organisationsprofile. Siehe die Kategorie Entwickler für einen Überblick.

Reddit

Scraper für Community-Plattformen für Reddit - Subreddit-Listen, Suchergebnisse und einzelne Beiträge mit ihren Kommentarbäumen. Siehe die Kategorie Social Media für einen Überblick.

Booking.com

Travel- und Hospitality-Scraper für Booking.com - Suchergebnis-Listings und einzelne Hotelseiten mit Preisen, Review-Scores und Ausstattung. Siehe die Kategorie Reisen, Events & Immobilien für einen Überblick.

Product Hunt

Product-Hunt-Scraper - tägliche und wöchentliche Bestenlisten sowie einzelne Produktseiten mit Upvotes, Makern, Themen und Bewertungen. Siehe die Kategorie Bewertungen & Q&A für einen Überblick.

Stack Exchange

Stack-Exchange-Scraper - Fragen-, Tag- und Suchlisten sowie einzelne Fragen-Threads mit jeder Antwort und jedem Kommentar, über das gesamte Stack-Exchange-Netzwerk hinweg.

Exercism

Entwicklerplattform-Scraper für Exercism - Track-Übungslisten, Anweisungen einzelner Übungen, Community-Lösungslisten und einzelne veröffentlichte Lösungen. Siehe die Kategorie Entwickler für einen Überblick.

OLX

Kleinanzeigen-Marktplatz-Scraper für OLX - Such-/Kategorie-Ergebnisseiten und einzelne Anzeigenseiten, über das gemeinsame Frontend (olx.pl, olx.ua, olx.pt, olx.ro, olx.bg, olx.kz, olx.uz). Siehe die Kategorie E-Commerce für einen Überblick.

Generisch

Seitenunabhängige Extraktoren, die mit jeder URL funktionieren.

Nicht gefunden, was Sie brauchen?

Für nicht unterstützte Websites können Sie jederzeit die Crawling API ohne Scraper verwenden, um das vollständige HTML zu erhalten und selbst zu parsen. Neue Scraper erscheinen monatlich - kontaktieren Sie den Support, wenn Sie eine spezifische Anfrage haben.