Anmelden

Juni 2026

2026-06-06 · Neue Scraper: Galaxus

2026-06-04 · Crawling API: PDF-Ausgabe

  • Der neue Parameter pdf=true der Crawling API gibt die vollständig gerenderte Seite als PDF (Content-Type: application/pdf) statt als HTML zurück.
  • Kombinieren Sie ihn mit den Rendering-Parametern (country, device, page_wait); PDF-Requests werden wie ein JavaScript-gerenderter Request abgerechnet.

2026-06-02 · Crawler-Management-API

  • Erstellen, abrufen und aktualisieren Sie Crawler programmatisch über REST, statt nur über das Dashboard.
  • Neue Endpoints: POST /crawler/<TOKEN> zum Erstellen, GET /crawler/<TOKEN>/<NAME> für Details und PUT /crawler/<TOKEN>/<NAME> zum Aktualisieren.

Mai 2026

2026-05-21 · Passwortloses Onboarding

  • Melden Sie sich mit einem Einmalcode an, der Ihnen per E-Mail zugeschickt wird. Kein Passwort zum Festlegen, Merken oder Zurücksetzen; bestehende Konten funktionieren weiterhin wie gewohnt.
  • Neu gestaltetes Onboarding für neue Konten. Wir wählen anhand Ihres angegebenen Anwendungsfalls einen Workflow vor (Scraping, MCP oder Integrationen), zeigen eine Live-Vorschau Ihres ersten Crawling API-Requests und leiten Sie nach Abschluss in den passenden Dashboard-Bereich weiter.

2026-05-08 · Neue Docs-Site

  • /docs wurde durchgängig neu aufgesetzt - umstrukturierte Navigation, Dark Mode und sofortige Seitenübergänge in allen Bereichen.
  • Die Command-Palette-Suche (⌘K / Ctrl K) springt von überall direkt zu Seiten, Abschnitten und API-Parametern.
  • Der neue Ask AI-Button öffnet einen Crawlbase-trainierten Assistenten direkt auf der Seite, sodass Sie alles zur Dokumentation fragen können, ohne sie zu verlassen.
  • Der interaktive API Playground führt echte Crawling API-Aufrufe direkt im Browser aus — mit Response-Headern und einer gerenderten Seitenvorschau neben dem Body.
  • Hängen Sie .md an eine beliebige Docs-URL an (z. B. /docs/crawling-api.md), um eine saubere Markdown-Kopie zu erhalten, die Sie an ein LLM weitergeben können.
  • /llms.txt wurde als Index für die Auffindbarkeit durch KI-Assistenten veröffentlicht.
  • Aktualisierte deutsche, französische, russische und vereinfachte chinesische Übersetzungen auf allen Seiten — präziser und idiomatischer formuliert.

2026-05-03 · Go SDK v0.1.0

  • Erstes offizielles Go SDK für die Crawlbase API. Ein einziger CrawlingAPI-Client, ohne Abhängigkeiten, idiomatisches Go.
  • Quelle: github.com/crawlbase/crawlbase-go. Referenzdokumentation veröffentlicht auf pkg.go.dev.

2026-05-02 · LangChain-Integration v0.1.0

April 2026

2026-04-24 · Crawling API: Markdown-Ausgabe

  • Der neue Parameter format=md der Crawling API liefert sauberes Markdown anstelle von HTML.
  • Kombinieren Sie es mit md_readability=true, um Navigation, Werbung und UI-Elemente vor der Konvertierung zu entfernen - dieselbe Idee wie der Reader Mode.

2026-04-23 · Tablet-Geräteoption

  • Der device-Parameter der Crawling API akzeptiert jetzt neben desktop und mobile auch tablet.

2026-04-23 · MCP Server v1.3.0 - Storage-Tools

2026-04-23 · Codex-Plugin

März 2026

2026-03-25 · Enterprise Crawler: queue_timeout

  • Enterprise Crawler Push akzeptiert jetzt queue_timeout, sodass Sie begrenzen können, wie lange ein Request in der Queue verbleibt, bevor er verworfen wird, anstatt ewig zu warten.

Februar 2026

2026-02-10 · Crawler in Enterprise Crawler umbenannt

  • Das asynchrone Push/Pull-Produkt heißt nun im Dashboard und in der Dokumentation Enterprise Crawler, um es von der synchronen Crawling API abzugrenzen.
  • Endpoints, Parameter und Token bleiben unverändert.

November 2025

2025-11-25 · MCP Server v1.2.0 - Auth & HTTP-Modus

  • Der MCP-Server unterstützt jetzt header-basierte Authentifizierung sowie zusätzlich zu stdio einen optionalen HTTP-Transportmodus - nützlich für geteilte/remote MCP-Setups.
  • Veröffentlicht als @crawlbase/[email protected].

2025-11-04 · Crawlbase-Marke in allen Sprachversionen

  • Die Umbenennung in Crawlbase ist jetzt in jeder übersetzten Ausgabe der Dokumentation umgesetzt (bisher nur auf Englisch).

Oktober 2025

2025-10-20 · Storage API in Cloud Storage umbenannt

  • Das Produkt für Abruf und Aufbewahrung heißt jetzt in Docs, Dashboard und SDK-Methodennamen Cloud Storage. Bestehende /storage-Endpoints funktionieren weiterhin.

September 2025

2025-09-26 · custom_success_code-Parameter

  • Die Crawling API erhält custom_success_code, sodass Sie Nicht-2xx-Antworten als erfolgreich markieren können, wenn Sie Endpoints scrapen, die berechtigterweise z. B. 404 oder 451 zurückgeben.

2025-09-16 · Smart Proxy → Smart AI Proxy

  • Smart Proxy heißt jetzt Smart AI Proxy und spiegelt damit die KI-gesteuerte Routing- und Retry-Logik wider, die darunter ergänzt wurde. Keine Änderungen auf Client-Seite.

Juli 2025

2025-07-10 · Crawlbase MCP Server v1.0

Juni 2025

2025-06-25 · Smart Proxy: Header- und Cookie-Weiterleitung

  • Smart Proxy leitet jetzt benutzerdefinierte Request-Header und Cookies an die Zielseite weiter - nützlich für authentifizierte Crawls und session-gebundenes Scraping.

2025-06-18 · scroll_interval-Abrechnung präzisiert

  • Die Crawling-API-Dokumentation beschreibt jetzt genau, wie scroll_interval bei Long-Scroll-Seiten in die Abrechnung einfließt, sodass Sie die Kosten eines Infinite-Scroll-Crawls vor dem Absetzen vorhersagen können.