Which SDKs does Crawlbase offer?

Official SDKs for Node, Python, Ruby, PHP, Java, .NET and Go, plus a Scrapy middleware and a Zapier integration. All are free and call the Crawling API and every Crawlbase scraper through one client.

Yes. Every SDK and library is free, with no extra cost. You only pay for the Crawling API requests you make, and up to 5,000 are free.

What if my language is not listed?

You do not need an SDK. The Crawlbase API is a plain REST endpoint, so you can call it directly over HTTP from any language or tool.

What do the SDKs cover?

One client covers the Crawling API and the scrapers, with helpers for parameters such as autoparse, screenshots, geotargeting and storage, so you write less boilerplate.

How do I authenticate?

Initialize the client with one of your Crawlbase tokens. The same token works across the SDKs, the Crawling API, the Crawler and every scraper.

Every SDK is documented with copy-paste examples, and our support team is available if you hit an issue or want to contribute a library.

Produkt / Bibliotheken und SDKs

Bibliotheken und SDKs.
Ein Token, jede Sprache.

Offizielle, kostenlose SDKs für Node, Python, Ruby, PHP, Java, .NET und Go, plus Scrapy und Zapier.
In einer Zeile installieren, oder die REST API direkt über HTTP aus allem aufrufen.

Kostenlos starten zur Dokumentation

7 Sprachen, 2 IntegrationenKostenlos und offennpm · PyPI · RubyGems · Packagist

Live-SDK-Calls1.24M req/minStreaming

200ebay.com/itm/195830173CA135ms

200github.com/crawlbaseFR61ms

200indeed.com/viewjob?jk=8a1cIN47ms

200producthunt.com/posts/notionSG69ms

200zillow.com/homedetails/123DE113ms

200etsy.com/listing/1029384CA131ms

200target.com/p/-/A-79348122ES170ms

200booking.com/hotel/fr/le-meuriceDE154ms

200amazon.com/dp/B08N5JZGGWGB194ms

301google.com/search?q=4k+tvBR210ms

200producthunt.com/posts/notionIN203ms

200zillow.com/homedetails/123FR158ms

200target.com/p/-/A-79348122JP42ms

200linkedin.com/in/williamhgatesJP211ms

200etsy.com/listing/1029384AU74ms

200producthunt.com/posts/notionAU219ms

200stackoverflow.com/questions/11227809SG156ms

200yelp.com/biz/blue-bottle-sfES129ms

200linkedin.com/in/williamhgatesIN142ms

200stackoverflow.com/questions/11227809JP92ms

200github.com/crawlbaseSG166ms

200booking.com/hotel/fr/le-meuriceUS131ms

200booking.com/hotel/fr/le-meuriceFR156ms

200stackoverflow.com/questions/11227809JP181ms

200booking.com/hotel/fr/le-meuriceIN216ms

404zillow.com/homedetails/123AU191ms

200ebay.com/itm/195830173CA135ms

200github.com/crawlbaseFR61ms

200indeed.com/viewjob?jk=8a1cIN47ms

200producthunt.com/posts/notionSG69ms

200zillow.com/homedetails/123DE113ms

200etsy.com/listing/1029384CA131ms

200target.com/p/-/A-79348122ES170ms

200booking.com/hotel/fr/le-meuriceDE154ms

200amazon.com/dp/B08N5JZGGWGB194ms

301google.com/search?q=4k+tvBR210ms

200producthunt.com/posts/notionIN203ms

200zillow.com/homedetails/123FR158ms

200target.com/p/-/A-79348122JP42ms

200linkedin.com/in/williamhgatesJP211ms

200etsy.com/listing/1029384AU74ms

200producthunt.com/posts/notionAU219ms

200stackoverflow.com/questions/11227809SG156ms

200yelp.com/biz/blue-bottle-sfES129ms

200linkedin.com/in/williamhgatesIN142ms

200stackoverflow.com/questions/11227809JP92ms

200github.com/crawlbaseSG166ms

200booking.com/hotel/fr/le-meuriceUS131ms

200booking.com/hotel/fr/le-meuriceFR156ms

200stackoverflow.com/questions/11227809JP181ms

200booking.com/hotel/fr/le-meuriceIN216ms

404zillow.com/homedetails/123AU191ms

01 Live-Demo

Derselbe Call. Wählen Sie Ihre Sprache.

Ein Client, live getippt. Installieren, mit Ihrem Token initialisieren und crawlen. Jede Sprache liefert identisches JSON zurück. Fahren Sie mit der Maus darüber, um anzuhalten und mitzulesen.

bereit

Tasten 1-5 wechseln · klicken zum Pausiereneigene URL ausführen

Führen Sie Ihren ersten Request in Minuten aus. Bis zu 5,000 kostenlose Requests, keine Kreditkarte.Kostenlos starten

02 Bibliotheken

Offizielle SDKs, jede wichtige Sprache.

Kostenlos, offen und ohne unnötige Abhängigkeiten. In einer Zeile installieren, mit Ihrem Token initialisieren und dieselbe API von überall aufrufen.

Node.jsnpm i crawlbase

Drop-in-Client für Node- und TypeScript-Projekte.

npm →Pythonpip install crawlbase

Installieren und die Crawlbase-Klasse aus jeder Python-App aufrufen.

PyPI →Rubygem install crawlbase

Ein abhängigkeitsfreies Gem für Crawling und Scraping.

RubyGems →PHPcomposer require crawlbase/crawlbase

Ein leichtgewichtiges PHP-Package für die Crawlbase APIs.

Packagist →Javacom.crawlbase:crawlbase-java-sdk-pom

Java SDK für Crawling und Scraping mit Crawlbase.

Maven →.NETdotnet add package CrawlbaseAPI

Integrieren Sie die Crawlbase APIs über NuGet in .NET-Projekte.

NuGet →Gogo get github.com/crawlbase/crawlbase-go

Ein schlanker Go-Client für die Crawling API.

pkg.go.dev →Scrapypip install scrapy-crawlbase-middleware

Crawlbase-Middleware für Ihre Scrapy-Spider.

PyPI →Zapier

Binden Sie Crawlbase in No-Code-Zapier-Workflows ein.

Zapier →Jede Sprachecurl https://api.crawlbase.com

Kein SDK nötig. Rufen Sie die REST API direkt über HTTP aus allem auf.

zur Dokumentation →Eine fehlt?

Sie haben eine Bibliothek gebaut oder möchten mitarbeiten? Wir würden gerne mit Ihnen zusammenarbeiten.

Kontakt aufnehmen →

03 So funktioniert es

Von der Installation zu Daten in vier Zeilen.

Einfach zu deployen, egal ob Sie gerade starten oder im großen Maßstab laufen.

Wählen Sie Ihre Sprache

Node, Python, Ruby, PHP, Java, .NET oder Go. Oder überspringen Sie das SDK und nutzen Sie reines HTTP.

Installieren Sie das Package

Eine Zeile aus Ihrer Registry: npm, PyPI, RubyGems, Packagist, Maven, NuGet oder go get.

Mit Ihrem Token initialisieren

Erstellen Sie den Client mit einem Ihrer Crawlbase Tokens. Derselbe Token funktioniert überall.

Rufen Sie die API auf

Übergeben Sie eine beliebige URL plus Parameter wie autoparse oder screenshot und lesen Sie die Response.

04 Hinweise

Gut zu wissen.

Kostenlos und offen

Jedes SDK und jede Bibliothek ist kostenlos. Sie zahlen nur für die Crawling API Requests, die Sie machen, und bis zu 5,000 sind kostenlos.

Jede Sprache über HTTP

Kein SDK für Ihren Stack? Die API ist ein reiner REST-Endpoint, sodass Sie sie direkt aus allem aufrufen können, das HTTP spricht.

Vollständig dokumentiert

Jedes SDK ist in den SDK-Docs abgedeckt, mit Copy-and-paste-Beispielen zur Installation und Nutzung.

Ein Token, jedes Produkt

Derselbe Token und Client decken die Crawling API, den Crawler und jeden Scraper ab. Nutzungspreise finden Sie auf der Preisseite.

05 Warum Crawlbase

Ein Client, die gesamte Plattform.

Die SDKs kapseln dasselbe Netzwerk, das 70,000+ Entwickler bedient. Keine Proxys zu kaufen, keine Browser zu betreiben, nichts zu patchen, wenn sich eine Website ändert.

Offizielle Sprach-SDKs

Kostenlos

Jede Bibliothek, bis zu 5,000 kostenlose Requests

70K+

Entwickler im Netzwerk

Token über jedes Produkt

In einer Zeile installieren, mit Ihrem Token initialisieren, und die Crawling API und jeder Scraper sind nur einen Methodenaufruf entfernt.

06 FAQ

SDK-Fragen.

Offizielle SDKs für Node, Python, Ruby, PHP, Java, .NET und Go, plus eine Scrapy-Middleware und eine Zapier-Integration. Alle sind kostenlos und rufen die Crawling API und jeden Scraper über einen Client auf.

Ja. Jedes SDK und jede Bibliothek ist kostenlos. Sie zahlen nur für die Crawling API Requests, die Sie machen, und bis zu 5,000 sind kostenlos.

Sie brauchen kein SDK. Die Crawlbase API ist ein reiner REST-Endpoint, sodass Sie sie direkt über HTTP aus jeder Sprache oder jedem Tool aufrufen können.

Ein Client deckt die Crawling API und die Scraper ab, mit Helfern für Parameter wie autoparse, Screenshots, Geotargeting und Storage, sodass Sie weniger Boilerplate schreiben.

Initialisieren Sie den Client mit einem Ihrer Crawlbase Tokens. Derselbe Token funktioniert über die SDKs, die Crawling API, den Crawler und jeden Scraper hinweg.

Jedes SDK ist mit Copy-and-paste-Beispielen dokumentiert, und unser Support-Team steht bereit, falls Sie auf ein Problem stoßen oder eine Bibliothek beitragen möchten.

Installieren Sie das SDK.
Crawlen Sie in vier Zeilen.

Kostenlos starten, mit bis zu 5,000 kostenlosen Crawling API Requests. Ein Token, jede Sprache.