Lösungen / eCommerceCrawlen und scrapen
Crawlen und scrapen
Sie eCommerce-Daten.
Scrapen Sie eCommerce-Websites wie Amazon, eBay, AliExpress und Walmart mit der Crawlbase Crawling API. Extrahieren Sie Trendprodukte, Preise, Bewertungen und Best-Seller-Insights, ohne Blocks zu verwalten.
01 Kurz gesagt
Was ist eCommerce-Scraping mit Crawlbase?
eCommerce-Scraping mit Crawlbase bedeutet: Sie senden eine Produkt-, Such- oder Kategorie-URL an die Crawling API und erhalten die Seite als gerendertes HTML oder als geparstes JSON zurück. Crawlbase kümmert sich um Proxies, JavaScript-Rendering und CAPTCHAs, Sie kümmern sich nur um die Daten.
Für Amazon, Walmart, eBay, AliExpress, Galaxus, Best Buy, Google Shopping, TikTok Shop und OLX fügen Sie der Anfrage einen Scraper-Namen wie amazon-product-details hinzu, und die Antwort kommt als strukturiertes JSON zurück. Für jeden anderen Shop liefert derselbe Aufruf das vollständige HTML zum Parsen. Sie können kostenlos mit bis zu 5,000 Requests starten, ohne Kreditkarte.
02 Websites crawlen und scrapen
Scrapen Sie die eCommerce-Websites, auf denen Sie verkaufen.
Produktbeschreibungen, Preise, Verkäuferinfos, Bewertungen und mehr, über die Marktplätze hinweg, die zählen.
AmazonScrapereBayScraperWalmartScraperAliExpressScraperBest BuyScraperTargetScraperGalaxusScraperFlipkartAnleitungAlibabaAnleitung
Crawlbase unterstützt diese und viele weitere eCommerce-Seiten.
03 Scraper-Katalog
Fertige eCommerce-Scraper.
Jeder Scraper zielt auf einen Seitentyp, daher bleibt die JSON-Struktur stabil. Übergeben Sie seinen Namen im Parameter scraper eines Crawling-API-Aufrufs. Eingabeformate und Output-Schemas finden Sie in der Dokumentation.
amazon-product-details · amazon-serp · amazon-offer-listing · amazon-product-reviews · amazon-best-sellers · amazon-new-releases
Amazon
Produktdetails, Suchergebnisse, Angebotslisten aller Verkäufer, Produktbewertungen sowie die Charts Best Sellers und New Releases. Übergeben Sie country (zum Beispiel US, UK oder DE), um einen regionalen Shop abzurufen.
walmart-product-details · walmart-serp · walmart-category
Walmart
Produktseiten, Suchergebnisse und Abteilungs- oder Kategorie-Feeds. Nützlich, um die Preisparität zwischen Amazon und Walmart für denselben Artikel zu verfolgen.
ebay-product · ebay-serp · ebay-seller-shop
eBay
Angebote mit Preis, Verkäufer, Zustand und Versand, Suchergebnisse sowie alle Angebote aus dem Shop eines einzelnen Verkäufers.
aliexpress-product · aliexpress-serp
AliExpress
Produktseiten und Suchergebnisse. Kombinieren Sie sie mit country, um den lokalisierten Preis und Versand für Ihren Zielmarkt zu sehen.
galaxus-product · galaxus-serp · galaxus-product-reviews
Galaxus
Produktseiten, Suchergebnisse und Kundenbewertungen für Galaxus und Digitec in der Schweiz. Setzen Sie country auf CH für genaue Preise und Verfügbarkeit.
bestbuy-product-details · bestbuy-serp
Best Buy
Produktdetails und Suchergebnisse. Gut geeignet für das Preis-Tracking von Unterhaltungselektronik in Nordamerika.
google-product-offers
Google Shopping
Alle Händlerangebote für ein Google-Shopping-Produkt, mit Preisen, Bewertungen und Verkäuferinfos. Ein händlerübergreifender Preisvergleich, ohne jeden Shop einzeln zu scrapen.
tiktok-shop
TikTok Shop
Ein TikTok-Shop-Storefront: Shop-Metadaten, Produkte, Bewertungen und Follower-Zahlen. Funktioniert am besten mit Ihrem JavaScript-Token.
olx-serp · olx-item
OLX
Such- oder Kategorieergebnisse und einzelne Anzeigenseiten auf dem gemeinsamen OLX-Frontend: olx.pl, olx.ua, olx.pt, olx.ro, olx.bg, olx.kz und olx.uz.
04 Was Sie scrapen können
Strukturierte Daten, sofort einsatzbereit.
Produktdetails
- Produkttitel
- Beschreibungen
- Bilder
- Kategorien
Markteinblicke
- Kundenbewertungen
- Verkäuferinformationen
- Trendprodukte
- Rabatte und Angebote
Logistikdaten
- Produktverfügbarkeit
- Lieferzeit
- Versandkosten
- Versandart
Preise und Rankings
- Aktuelle Preise
- Listen- und Angebotspreise
- Sternebewertungen
- Bestseller-Ränge
05 So funktioniert es
Von der URL zum JSON in vier Schritten.
Derselbe Ablauf funktioniert für jeden Marktplatz im Katalog.
01
Token holen
Erstellen Sie ein kostenloses Crawlbase-Konto und kopieren Sie Ihren Crawling-API-Token.
02
Scraper wählen
Wählen Sie den Scraper, der zum Seitentyp passt: Produkt, Suche, Kategorie, Verkäufer-Shop, Angebote oder Bewertungen.
03
URL senden
Rufen Sie die Crawling API mit Ihrem Token, der Ziel-URL und dem Scraper-Namen auf. Fügen Sie country hinzu, wenn Sie einen bestimmten Shop brauchen.
04
JSON erhalten
Crawlbase routet die Anfrage, rendert die Seite, besteht Bot-Prüfungen und liefert geparstes JSON. Abgerechnet werden nur erfolgreiche Requests.
06 Sehen Sie es in Aktion
Ein GET-Request, strukturierte Daten zurück.
Richten Sie die Crawling API auf eine Amazon-Produkt- oder Such-URL und erhalten Sie die gerenderte Seite oder autoparsed JSON. Keine Proxys, keine CAPTCHAs.
curl "https://api.crawlbase.com/?token=YOUR_TOKEN&scraper=amazon-product-details\
&url=https://www.amazon.com/dp/B07S5QWM6L"07 Codebeispiel
Derselbe Aufruf in Python.
Installieren Sie das offizielle SDK mit pip install crawlbase und übergeben Sie den Scraper-Namen als Option. SDKs gibt es auch für Node.js, Ruby, PHP, Go, Java und .NET.
from crawlbase import CrawlingAPI
import json
api = CrawlingAPI({'token': 'YOUR_TOKEN'})
res = api.get(
'https://www.amazon.com/Apple-iPhone-Silicone-Case-MagSafe/dp/B0CHX2XFLN',
{'scraper': 'amazon-product-details'}
)
data = json.loads(res['body'])
print(data['name'], data['price'])08 Anwendungsfälle
Was Teams mit eCommerce-Daten bauen.
USE / 01Preise
Preis-Monitoring
Rufen Sie amazon-product-details oder walmart-product-details regelmäßig ab, speichern Sie Preis und Verfügbarkeit und lassen Sie sich bei Änderungen benachrichtigen.
USE / 02Wettbewerb
Wettbewerbsanalyse
Führen Sie amazon-serp für Ihre Ziel-Suchanfragen aus und rufen Sie dann die Produktdetails zu jedem Ergebnis ab, um zu sehen, wer zu welchem Preis rankt.
USE / 03Katalog
Katalog-Anreicherung
Ergänzen Sie Ihre eigenen SKUs mit Marke, Bildern, Features und Beschreibungen aus den Produktdetail-Scrapern.
USE / 04Marketing
Launch- und Werbemessung
Verfolgen Sie die Rankings von amazon-best-sellers und amazon-new-releases vor und nach einer Kampagne oder einem Produktlaunch.
USE / 05Verkäufer
Reseller-Tracking
Nutzen Sie ebay-seller-shop, um den Katalog eines bestimmten Verkäufers über die Zeit zu verfolgen statt eines einzelnen Produkts.
USE / 06Bewertungen
Bewertungsanalyse
Rufen Sie amazon-product-reviews oder galaxus-product-reviews ab, um Bewertungen und wiederkehrende Beschwerden zu Ihren Produkten und denen Ihrer Wettbewerber zu verfolgen.
09 Warum Teams sich für Crawlbase entscheiden
Gebaut für präzise eCommerce-Daten im großen Maßstab.
- Hervorragender Support und Dokumentation
- Nahtlose Skalierbarkeit
- Präzise und konsistente eCommerce-Daten
- Keine Limits, globale Proxys für den Zugriff auf jede Website
- GDPR- und CCPA-konform
- Blockierte Inhalte einfach zugänglich machen
10 Alles in einer Plattform
Erfassen, speichern und skalieren.
Crawling API
Erhalten Sie das vollständige gerenderte HTML oder autoparsed JSON für jede Produkt- oder Suchseite. Rotierende Proxys und KI beseitigen IP-Blocks und CAPTCHAs aus jeder Geolokalisierung.
Cloud Storage
Senden Sie gecrawlte Seiten mit einem einzigen Parameter direkt in die Cloud, sodass Sie keinen eigenen Storage aufbauen müssen.
Crawler
Führen Sie für große Projekte asynchrones Crawling mit Callbacks aus, um Kosten, Retries und Bandbreite zu sparen.
11 Überblick
Crawlbase für eCommerce-Crawling.
Einfach zu nutzen, auch mit geringen Programmierkenntnissen.
Hoch skalierbare API mit unseren weltweiten Proxys.
Automatisieren Sie Browser-Scraping für JavaScript-lastige Websites.
Schützen Sie Ihren Crawler vor Blocks, IP-Leaks und CAPTCHAs.
Exportieren Sie Daten als reines HTML oder strukturiertes JSON.
Rufen Sie schnelle, zuverlässige und hochwertige Daten ab.
12 Gut zu wissen
Bevor Sie starten.
Websites ohne Scraper
Für Shops, die nicht im Katalog sind, rufen Sie die Crawling API ohne den Parameter scraper auf und parsen das zurückgegebene HTML selbst.
Regionale Shops
Übergeben Sie country (zum Beispiel DE), um zu sehen, was ein lokaler Käufer sieht: Währung, Sprache und regionale Verfügbarkeit.
Ein Token für alles
Derselbe Token funktioniert für jeden Scraper und für normale Crawling-API-Aufrufe, mit denselben Rate Limits. Es gibt kein Setup pro Website.
Stabiler Output
Jeder Scraper zielt auf einen einzigen Seitentyp, daher bleibt die JSON-Struktur stabil, wenn sich das zugrunde liegende HTML ändert.
13 FAQ
Fragen zum eCommerce-Scraping.
Für Websites wie Amazon, eBay, AliExpress, Walmart und Best Buy können Sie Daten als CSV, Excel oder JSON exportieren. Für andere eCommerce-Websites ist die Standardausgabe HTML. Benötigen Sie ein anderes Format? Kontaktieren Sie den Support für individuelle Lösungen.
Ja. Unser Support-Team ist rund um die Uhr (24/7) verfügbar, um bei jedem Problem oder jeder Frage zu helfen.
Die Crawling API antwortet im Durchschnitt in etwa 4 to 10 seconds. Wir empfehlen, einen Timeout von mindestens 90 seconds einzustellen.
Amazon, Walmart, eBay, AliExpress, Galaxus, Best Buy, Google Shopping (Produktangebote), TikTok Shop und OLX. Die Scraper decken Seitentypen wie Produktdetails, Suchergebnisse, Kategorie-Feeds, Verkäufer-Shops, Angebotslisten und Bewertungen ab.
Ja. Senden Sie die URL ohne den Parameter scraper an die Crawling API, und Sie erhalten das vollständige HTML der Seite zurück, mit Proxies, Rendering und CAPTCHAs erledigt. Danach parsen Sie die Felder, die Sie brauchen.
Fügen Sie der Anfrage den Parameter country hinzu, zum Beispiel country=DE. Crawlbase routet die Anfrage so, dass Sie Währung, Sprache und Verfügbarkeit sehen, die ein Käufer in diesem Land sieht.
Nein. Die Crawling API rotiert Proxies, rendert JavaScript bei Bedarf und kümmert sich für Sie um CAPTCHAs und Blocks.
Sie können kostenlos mit bis zu 5,000 Requests starten, ohne Kreditkarte. Danach zahlen Sie nur für erfolgreiche Requests, und ein Token funktioniert für jeden Scraper und die Crawling API. Aktuelle Preise finden Sie auf der Preisseite.
Starten Sie mit dem eCommerce-Scraping.
Umgehen Sie die Blocks.
Bis zu 5,000 Requests kostenlos, keine Kreditkarte. Eine API für jeden Marktplatz, ganz ohne Proxys oder CAPTCHAs zu verwalten.