n8n hat viel Aufmerksamkeit erregt, weil es jedem ermöglicht, Aufgaben einfach zu automatisieren. Man kann Dienste miteinander verknüpfen, Aktionen auslösen und komplette Arbeitsabläufe über eine übersichtliche visuelle Oberfläche erstellen. Wenn man das mit Crawlbase Mit Web MCP erhalten Sie etwas noch Leistungsstärkeres: eine Möglichkeit, echte Webseiten zu scrapen und die Daten direkt in KI-Modelle einzuspeisen.

Crawlbase Web-MCP Es fungiert als Schnittstelle, die es Ihrem Workflow ermöglicht, Inhalte aus dem Web abzurufen, in ein nutzbares Format zu konvertieren und sie dem nächsten KI-Schritt zuzuführen. Dadurch eignet es sich ideal für Recherchen, die Beobachtung von Wettbewerbern, die Erfassung großer Datenmengen und viele andere Web-Scraping-Aufgaben, die normalerweise benutzerdefinierte Skripte erfordern.

Da viele Benutzer wissen möchten, wie man diese Tools zusammensetzt, führen wir Sie durch die Einrichtung und zeigen Ihnen genau, wie es funktioniert.

Bevor wir beginnen, gibt es ein paar Dinge, die Sie vorbereiten müssen.

Was Sie zum Einrichten von n8n benötigen Crawlbase Web-MCP

Stellen Sie sicher, dass Sie einige grundlegende Dinge bereithalten:

  • n8n - Sowohl die Desktop-App als auch n8n Cloud funktionieren.
  • A Crawlbase Konto - Registrieren bei Crawlbase Um Ihre kostenlosen API-Token zu erhalten.
  • Node.js - Laden Sie Node.js das laufen lassen Crawlbase Lokaler Web-MCP-Server.
  • ngrok (optional) - Nur für n8n Cloud-Nutzer, die ihren lokalen Server online erreichen müssen.

Sobald diese Komponenten vorhanden sind, können Sie alles miteinander verbinden.

Wie n8n funktioniert Crawlbase Durch MCP

n8n nutzt MCP zur Kommunikation mit externen Tools. Anstatt eine eigene Integration zu entwickeln, starten Sie den MCP-Server, und n8n kann alle vom Server bereitgestellten Funktionen aufrufen. In diesem Fall… Crawlbase Der Web-MCP-Server ermöglicht n8n den Zugriff auf CrawlbaseCrawling-Funktionen.

Der Ablauf ist ziemlich einfach:

  • Das MCP-Client-Tool in n8n kontaktiert den MCP-Server.
  • die Crawlbase Der Web-MCP-Server stellt die eigentlichen Scraping-Funktionen bereit.
  • Ihr Workflow empfängt die Daten und leitet sie an Ihren KI-Schritt weiter.

Sie müssen sich nicht mit API-Headern oder Skripten auseinandersetzen. Sobald dies eingerichtet ist, sendet n8n die Anfrage und Crawlbase Gibt die angeforderten Daten zurück.

Bereit? Dann fangen wir an.

Schritt 1: Installieren und Starten Sie das Programm Crawlbase Web-MCP-Server

Der MCP-Server muss laufen, da er die Crawling-Funktionen für n8n bereitstellt. Öffnen Sie also Ihr Node.js-Terminal und installieren Sie das Projekt:

1
2
3
git klonen https://github.com/crawlbase/crawlbase-mcp
cd crawlbase-mcp
npm installieren

Ersetzen Sie die unten stehenden Platzhalter durch Ihre eigenen Token aus dem Crawlbase Instrumententafel.

1
CRAWLBASE_TOKEN=Ihr_Token CRAWLBASE_JS_TOKEN=Ihr_JS_Token npm run start:http

Folgendes tun sie:

  • CRAWLBASE_TOKEN ist für normales Kriechen geeignet.
  • CRAWLBASE_JS_TOKEN dient dem Crawlen von Seiten, die stark auf JavaScript basieren.

Starten Sie den Server. Wenn alles korrekt installiert ist, ist der Server unter folgender Adresse erreichbar: http://localhost:3000.
Lassen Sie dieses Terminalfenster geöffnet, da n8n diesen laufenden Server verwenden wird, wenn Sie später eine Verbindung zu MCP herstellen.

Hinweis: Wenn Sie weitere Konfigurationsoptionen einsehen möchten, können Sie die folgende Seite besuchen: Crawlbase Web-MCP-Dokumentation für den HTTP-Transportmodus.

Optional für n8n Cloud-Nutzer: Verwendung von ngrok

Wenn Sie n8n Desktop verwenden, ist dieser Abschnitt nicht erforderlich. Cloud-Nutzer benötigen jedoch eine öffentliche URL, damit n8n den auf Ihrem lokalen Rechner laufenden MCP-Server erreichen kann.

Ngrok Erstellt einen sicheren Tunnel vom Internet zu Ihrem lokalen Rechner. So richten Sie ihn ein:

  1. Installieren Sie das ngrok CLI
  2. Verknüpfen Sie es mit Ihrem ngrok-Konto
  3. Stelle einen Tunnel zu deinem MCP-Server her:
1
ngrok http3000

Sie erhalten einen Link, der etwa so aussieht:

1
https://abcd1234.ngrok.io

Verwenden Sie das als Endpunkt in n8n.

Nur eine kurze Erinnerung: Da dadurch Ihr MCP-Server online offengelegt wird, vermeiden Sie es, die URL oder Ihre Token weiterzugeben.

Schritt 2: Verbinden Sie n8n mit dem Crawlbase Web-MCP-Server

Öffnen Sie n8n und gehen Sie zu Ihrem Workflow. Fügen Sie ein MCP Client Tool-Knoten neben Ihrem KI-Agenten-Knoten. Dieser Teil ermöglicht es dem KI-Agenten, die Scraping-Tools von Crawlbase.

In den Knoteneinstellungen:

  • Endpunkt
    • Nutzen Sie http://localhost:3000 Wenn Sie mit n8n Desktop arbeiten
    • Verwenden Sie Ihre ngrok HTTPS-URL, wenn Sie n8n Cloud nutzen.
  • Server-Transport: Wählen Sie HTTP Streamable
  • Authentifizierung: Wählen Sie „Keine“, da Ihre Token bereits in Schritt 1 festgelegt wurden.
  • Zu verwendende Werkzeuge: Wählen Alle

Wenn die Verbindung funktioniert, werden Ihnen Tools wie beispielsweise angezeigt. crawl, crawl_markdown und crawl_screenshot erscheinen innerhalb des Knotens.

Ihre Verbindung ist nun hergestellt, und Sie können mit dem Aufbau Ihres ersten Scraping-Workflows beginnen.

Schritt 3: Erstellen Sie Ihren ersten KI-basierten Scraping-Workflow (ohne Programmierung)

Nachdem alles miteinander verbunden ist, erstellen wir einen einfachen Workflow, der eine Webseite abruft und eine Zusammenfassung erstellt.

Ihr Arbeitsablauf besteht aus zwei Hauptteilen:

  1. Ein KI-Agentenknoten, der bereits Zugriff auf das zuvor konfigurierte MCP-Client-Tool hat.
  2. OpenAI Chat Model-Knoten, der die Zusammenfassung generiert

Fügen Sie im Knoten „KI-Agent“ eine Eingabeaufforderung hinzu, die der KI sagt, was sie tun soll. Zum Beispiel:

1
Crawlen Sie https://crawlbase.com/blog/best-web-scraper-api-2025 und fassen Sie den Artikel in 3 Stichpunkten zusammen.

Der Workflow löst einen Crawl aus, sammelt den Seiteninhalt und übergibt ihn dann zur Zusammenfassung an das Modell.

Klicke Schritt ausführen Testen Sie Ihre Konfiguration auf dem AI-Agent-Knoten. Die Zusammenfassung sollte in Kürze in der Ausgabe erscheinen.

Wenn Sie sehen möchten, was im Hintergrund passiert ist, öffnen Sie die Workflow-Ausführungsprotokolle. Dort sehen Sie die Crawl-Anfrage, die zurückgegebenen Daten und den Markdown-Konvertierungsschritt.

An diesem Punkt haben Sie eine automatisierte Schleife, in der der KI-Agent die crawl_markdown Die Funktion sammelt den Inhalt und erstellt ohne zusätzliche Konfiguration eine übersichtliche Zusammenfassung.

Tipps zur Fehlerbehebung beim Verbinden von n8n mit dem MCP-Server

Sollte etwas nicht wie erwartet funktionieren, lassen sich die Probleme in der Regel durch diese kurzen Überprüfungen beheben.

n8n kann keine Verbindung zum MCP-Server herstellen.

  • Stellen Sie sicher, dass der MCP-Server in Ihrem Terminal noch ausgeführt wird.
  • Prüfen Sie, ob der Endpunkt korrekt ist, ob er http://localhost:3000 oder Ihre ngrok-URL
  • Prüfen Sie, ob auf Ihrem System kein Port 3000 blockiert wird.

Token- oder Berechtigungsfehler

  • Bestätigen Sie Ihre Crawlbase Tokens im Dashboard
  • Versuchen Sie, die Token erneut zu kopieren, um zusätzliche Leerzeichen oder fehlende Zeichen zu vermeiden.
  • Stellen Sie sicher, dass Ihr Konto über genügend Guthaben verfügt, um Anfragen auszuführen.

Im Knoten „MCP-Client-Tool“ werden keine Werkzeuge angezeigt.

  • Stellen Sie sicher, dass der Servertransport auf HTTP Streamable eingestellt ist.
  • Versuchen Sie, die Werkzeugliste in n8n zu aktualisieren.
  • Falls nichts geladen wird, starten Sie sowohl n8n als auch den MCP-Server neu.

Die Ausgabe ist leer oder sieht fehlerhaft aus.

  • Öffnen Sie die Ausführungsprotokolle, um zu sehen, was zurückgegeben wurde.
  • Testen Sie den Workflow mit einer einfacheren URL.
  • Aktualisieren Sie Ihre Eingabeaufforderung so, dass sie die KI eindeutig anweist, einen Crawl durchzuführen.

Schlussbemerkungen: Mehr bauen mit n8n und Crawlbase Web-MCP

Sie verfügen nun über eine funktionierende Konfiguration, mit der n8n eine Seite abrufen kann. Crawlbase Web MCP und übergibt den Inhalt einem KI-Modell. Es ist ein einfaches Beispiel, aber sobald man es in Aktion sieht, wird deutlich, wie viel mehr man mit derselben Idee erreichen kann.

Hier sind einige Ideen, die Sie als Nächstes ausprobieren können:

  • Die Seiten der Konkurrenz sollen nach einem Zeitplan ausgelesen und von n8n kurze Zusammenfassungen in Slack gepostet werden.
  • Verfolgen Sie die Produktpreise auf verschiedenen Websites und lassen Sie sich benachrichtigen, wenn sich etwas ändert.
  • Wähle einige Artikel zum selben Thema aus und lass die KI eine schnelle Übersicht erstellen.
  • Sammeln Sie Geschäftsdaten aus Verzeichnissen und senden Sie diese direkt an ein CRM-System.
  • Beobachten Sie, wie sich bestimmte Seiten im Laufe der Zeit verändern, insbesondere im Hinblick auf die Suchmaschinenoptimierung.

Für einen tieferen Einblick können Sie mehrere MCP-Tools in einem Workflow verketten, Bedingungen hinzufügen, damit n8n jede Seite unterschiedlich behandelt, oder die gesammelten Ergebnisse an einem Ort speichern, um sie später vergleichen zu können. Auch die Planung ist sehr hilfreich, insbesondere bei wiederkehrenden Scrapes.

Das Schöne an diesem Setup ist, dass man keinen Code schreiben muss, um etwas Nützliches zu erstellen. n8n übernimmt die Automatisierung. Crawlbase Das Crawling wird von MCP übernommen, und MCP sorgt für die reibungslose Verbindung aller Komponenten. Sobald man mit dem Experimentieren beginnt, wird es überraschend einfach, Arbeitsabläufe zu erstellen, für die normalerweise benutzerdefinierte Skripte erforderlich wären.

Wenn Sie mehr Inspiration wünschen, n8n-Community Enthält zahlreiche Beispiele und Diskussionen, die Ihnen helfen können, neue Ideen zu entwickeln.

Erstellen Sie Crawlbase Konto Sichern Sie sich jetzt Ihre Gratis-Credits und beginnen Sie noch heute mit der Erstellung Ihrer eigenen Workflows.