Which SDKs does Crawlbase offer?

Official SDKs for Node, Python, Ruby, PHP, Java, .NET and Go, plus a Scrapy middleware and a Zapier integration. All are free and call the Crawling API and every Crawlbase scraper through one client.

Yes. Every SDK and library is free, with no extra cost. You only pay for the Crawling API requests you make, and up to 5,000 are free.

What if my language is not listed?

You do not need an SDK. The Crawlbase API is a plain REST endpoint, so you can call it directly over HTTP from any language or tool.

What do the SDKs cover?

One client covers the Crawling API and the scrapers, with helpers for parameters such as autoparse, screenshots, geotargeting and storage, so you write less boilerplate.

How do I authenticate?

Initialize the client with one of your Crawlbase tokens. The same token works across the SDKs, the Crawling API, the Crawler and every scraper.

Every SDK is documented with copy-paste examples, and our support team is available if you hit an issue or want to contribute a library.

Produkt / Bibliotheken und SDKs

Bibliotheken und SDKs.
Ein Token, jede Sprache.

Offizielle, kostenlose SDKs für Node, Python, Ruby, PHP, Java, .NET und Go, plus Scrapy und Zapier.
In einer Zeile installieren, oder die REST API direkt über HTTP aus allem aufrufen.

Kostenlos starten zur Dokumentation

7 Sprachen, 2 IntegrationenKostenlos und offennpm · PyPI · RubyGems · Packagist

Live-SDK-Calls1.24M req/minStreaming

200github.com/crawlbaseIN46ms

301zillow.com/homedetails/123JP113ms

200stackoverflow.com/questions/11227809FR178ms

200github.com/crawlbaseBR129ms

200etsy.com/listing/1029384CA145ms

200target.com/p/-/A-79348122JP116ms

200stackoverflow.com/questions/11227809IN202ms

200amazon.com/dp/B08N5JZGGWUS205ms

200github.com/crawlbaseCA77ms

200stackoverflow.com/questions/11227809IN148ms

200zillow.com/homedetails/123US182ms

200glassdoor.com/Reviews/googleBR139ms

200google.com/search?q=4k+tvBR117ms

200google.com/search?q=4k+tvBR212ms

200target.com/p/-/A-79348122AU88ms

200linkedin.com/in/williamhgatesSG84ms

200yelp.com/biz/blue-bottle-sfSG68ms

200target.com/p/-/A-79348122US187ms

200tripadvisor.com/Hotel_Review-g60763IN132ms

200github.com/crawlbaseIN219ms

200etsy.com/listing/1029384GB71ms

200zillow.com/homedetails/123SG191ms

200target.com/p/-/A-79348122BR180ms

200yelp.com/biz/blue-bottle-sfIN189ms

200ebay.com/itm/195830173CA41ms

200linkedin.com/in/williamhgatesJP156ms

200github.com/crawlbaseIN46ms

301zillow.com/homedetails/123JP113ms

200stackoverflow.com/questions/11227809FR178ms

200github.com/crawlbaseBR129ms

200etsy.com/listing/1029384CA145ms

200target.com/p/-/A-79348122JP116ms

200stackoverflow.com/questions/11227809IN202ms

200amazon.com/dp/B08N5JZGGWUS205ms

200github.com/crawlbaseCA77ms

200stackoverflow.com/questions/11227809IN148ms

200zillow.com/homedetails/123US182ms

200glassdoor.com/Reviews/googleBR139ms

200google.com/search?q=4k+tvBR117ms

200google.com/search?q=4k+tvBR212ms

200target.com/p/-/A-79348122AU88ms

200linkedin.com/in/williamhgatesSG84ms

200yelp.com/biz/blue-bottle-sfSG68ms

200target.com/p/-/A-79348122US187ms

200tripadvisor.com/Hotel_Review-g60763IN132ms

200github.com/crawlbaseIN219ms

200etsy.com/listing/1029384GB71ms

200zillow.com/homedetails/123SG191ms

200target.com/p/-/A-79348122BR180ms

200yelp.com/biz/blue-bottle-sfIN189ms

200ebay.com/itm/195830173CA41ms

200linkedin.com/in/williamhgatesJP156ms

01 Live-Demo

Derselbe Call. Wählen Sie Ihre Sprache.

Ein Client, live getippt. Installieren, mit Ihrem Token initialisieren und crawlen. Jede Sprache liefert identisches JSON zurück. Fahren Sie mit der Maus darüber, um anzuhalten und mitzulesen.

bereit

Tasten 1-5 wechseln · klicken zum Pausiereneigene URL ausführen

Führen Sie Ihren ersten Request in Minuten aus. Bis zu 5,000 kostenlose Requests, keine Kreditkarte.Kostenlos starten

02 Bibliotheken

Offizielle SDKs, jede wichtige Sprache.

Kostenlos, offen und ohne unnötige Abhängigkeiten. In einer Zeile installieren, mit Ihrem Token initialisieren und dieselbe API von überall aufrufen.

Node.jsnpm i crawlbase

Drop-in-Client für Node- und TypeScript-Projekte.

npm →Pythonpip install crawlbase

Installieren und die Crawlbase-Klasse aus jeder Python-App aufrufen.

PyPI →Rubygem install crawlbase

Ein abhängigkeitsfreies Gem für Crawling und Scraping.

RubyGems →PHPcomposer require crawlbase/crawlbase

Ein leichtgewichtiges PHP-Package für die Crawlbase APIs.

Packagist →Javacom.crawlbase:crawlbase-java-sdk-pom

Java SDK für Crawling und Scraping mit Crawlbase.

Maven →.NETdotnet add package CrawlbaseAPI

Integrieren Sie die Crawlbase APIs über NuGet in .NET-Projekte.

NuGet →Gogo get github.com/crawlbase/crawlbase-go

Ein schlanker Go-Client für die Crawling API.

pkg.go.dev →Scrapypip install scrapy-crawlbase-middleware

Crawlbase-Middleware für Ihre Scrapy-Spider.

PyPI →Zapier

Binden Sie Crawlbase in No-Code-Zapier-Workflows ein.

Zapier →Jede Sprachecurl https://api.crawlbase.com

Kein SDK nötig. Rufen Sie die REST API direkt über HTTP aus allem auf.

zur Dokumentation →Eine fehlt?

Sie haben eine Bibliothek gebaut oder möchten mitarbeiten? Wir würden gerne mit Ihnen zusammenarbeiten.

Kontakt aufnehmen →

03 So funktioniert es

Von der Installation zu Daten in vier Zeilen.

Einfach zu deployen, egal ob Sie gerade starten oder im großen Maßstab laufen.

Wählen Sie Ihre Sprache

Node, Python, Ruby, PHP, Java, .NET oder Go. Oder überspringen Sie das SDK und nutzen Sie reines HTTP.

Installieren Sie das Package

Eine Zeile aus Ihrer Registry: npm, PyPI, RubyGems, Packagist, Maven, NuGet oder go get.

Mit Ihrem Token initialisieren

Erstellen Sie den Client mit einem Ihrer Crawlbase Tokens. Derselbe Token funktioniert überall.

Rufen Sie die API auf

Übergeben Sie eine beliebige URL plus Parameter wie autoparse oder screenshot und lesen Sie die Response.

04 Hinweise

Gut zu wissen.

Kostenlos und offen

Jedes SDK und jede Bibliothek ist kostenlos. Sie zahlen nur für die Crawling API Requests, die Sie machen, und bis zu 5,000 sind kostenlos.

Jede Sprache über HTTP

Kein SDK für Ihren Stack? Die API ist ein reiner REST-Endpoint, sodass Sie sie direkt aus allem aufrufen können, das HTTP spricht.

Vollständig dokumentiert

Jedes SDK ist in den SDK-Docs abgedeckt, mit Copy-and-paste-Beispielen zur Installation und Nutzung.

Ein Token, jedes Produkt

Derselbe Token und Client decken die Crawling API, den Crawler und jeden Scraper ab. Nutzungspreise finden Sie auf der Preisseite.

05 Warum Crawlbase

Ein Client, die gesamte Plattform.

Die SDKs kapseln dasselbe Netzwerk, das 70,000+ Entwickler bedient. Keine Proxys zu kaufen, keine Browser zu betreiben, nichts zu patchen, wenn sich eine Website ändert.

Offizielle Sprach-SDKs

Kostenlos

Jede Bibliothek, bis zu 5,000 kostenlose Requests

70K+

Entwickler im Netzwerk

Token über jedes Produkt

In einer Zeile installieren, mit Ihrem Token initialisieren, und die Crawling API und jeder Scraper sind nur einen Methodenaufruf entfernt.

06 FAQ

SDK-Fragen.

Offizielle SDKs für Node, Python, Ruby, PHP, Java, .NET und Go, plus eine Scrapy-Middleware und eine Zapier-Integration. Alle sind kostenlos und rufen die Crawling API und jeden Scraper über einen Client auf.

Ja. Jedes SDK und jede Bibliothek ist kostenlos. Sie zahlen nur für die Crawling API Requests, die Sie machen, und bis zu 5,000 sind kostenlos.

Sie brauchen kein SDK. Die Crawlbase API ist ein reiner REST-Endpoint, sodass Sie sie direkt über HTTP aus jeder Sprache oder jedem Tool aufrufen können.

Ein Client deckt die Crawling API und die Scraper ab, mit Helfern für Parameter wie autoparse, Screenshots, Geotargeting und Storage, sodass Sie weniger Boilerplate schreiben.

Initialisieren Sie den Client mit einem Ihrer Crawlbase Tokens. Derselbe Token funktioniert über die SDKs, die Crawling API, den Crawler und jeden Scraper hinweg.

Jedes SDK ist mit Copy-and-paste-Beispielen dokumentiert, und unser Support-Team steht bereit, falls Sie auf ein Problem stoßen oder eine Bibliothek beitragen möchten.

Installieren Sie das SDK.
Crawlen Sie in vier Zeilen.

Kostenlos starten, mit bis zu 5,000 kostenlosen Crawling API Requests. Ein Token, jede Sprache.