Webdaten,
ganz mühelos.
Gehen Sie mit Ihren Scrapern die extra Meile.
Alles, was Sie wissen wollten
Ist Ihre Frage nicht dabei, schreiben Sie unserem Team, es antwortet schnell.
Was ist Crawlbase?
Crawlbase ist Webdaten-Infrastruktur für Entwickler, Unternehmen und LLMs. Ein Konto und ein Token decken die Crawling API, den asynchronen Enterprise Crawler, Smart AI Proxy, Cloud Storage und das Web MCP für KI-Agenten ab, mit Residential Proxies, JavaScript-Rendering und Anti-Bot-Handling ab Werk. Siehe die vollständige Doku.
Brauche ich für den Start eine Kreditkarte?
Nein. Jedes neue Konto startet mit bis zu 10,000 kostenlosen erfolgreichen Anfragen und ohne Kreditkarte, sodass Sie zuerst jede Ausgabe testen können (HTML, JSON, Markdown und Screenshots). Fügen Sie eine Karte erst hinzu, wenn Sie mehr Volumen brauchen; nutzungsbasierte Tarife finden Sie auf der Preisseite.
Welche Sprachen und SDKs werden unterstützt?
Die API ist reines HTTP, also funktioniert jede Sprache, die eine Anfrage senden kann. Wir liefern offizielle SDKs für Python, Node, Ruby, PHP und Go, dazu Community-Bibliotheken für weitere Sprachen. Siehe alle Bibliotheken.
Was passiert, wenn eine Anfrage fehlschlägt?
Sie zahlen nur für erfolgreiche Anfragen. Die Crawling API wiederholt bei einem Soft Fail automatisch mit anderen Proxies und Headern, und eine Anfrage zählt erst dann auf Ihr Kontingent, wenn sie erfolgreich ist: Timeouts, Blocks und 5xx-Fehler der Zielseite sind kostenlos, Retries sind also unbedenklich. Details stehen in den Crawling API Docs.
Kann ich Anfragen auf ein bestimmtes Land geolokalisieren?
Ja. Fügen Sie einen country-Parameter mit einem zweibuchstabigen ISO-Code hinzu (zum Beispiel country=US oder country=DE), und die Anfrage wird über Residential Exit Nodes in dieser Region geroutet, in über zwei Dutzend Ländern. Crawlbase kann automatisch den besten Proxy für eine Seite wählen, um die Erfolgsquote hoch zu halten. Siehe den country-Parameter in den Crawling API Docs.