Suchergebnisse auf google.com scrapen

Über google.com

Die Sitemaps führen 3.142 URLs in 15 Dateien.

Die robots.txt nennt 1 Sitemap und sperrt 12 Pfade, darunter /search, /sdch, /groups.

Gemessen auf Crawlbase

Erfolgsquote über jeden Request jedes Accounts im August 2026: 97.0%. Muster, Länder und Fehler stammen aus dem Request-Log seit 14 Aug 2026; 0.2% der erfolgreichen Aufrufe nutzten den JavaScript-Token, die mittlere Antwort dauerte 1.9s.

Unter den 11 Tech und Entwickler-Websites im Cookbook steht google.com nach Erfolgsrate auf Platz 7 von 11; der Median der Kategorie liegt bei 97.8%. Die mittlere Antwort von 1.9s liegt auf dem Kategorie-Median von 1.9s. 8 der 11 nehmen den einfachen Token an, diese Website auch.

Der Call

Suchergebnisseiten sind die Form, die die Accounts hier am häufigsten abrufen, mit dem Land und dem Token, die am häufigsten Erfolg haben. Ersetzen Sie die Platzhalter-Suchanfrage durch Ihre eigene.

curl "https://api.crawlbase.com/?token=YOUR_TOKEN&url=https%3A%2F%2Fwww.google.com%2Fsearch"

from crawlbase import CrawlingAPI
api = CrawlingAPI({'token': 'YOUR_TOKEN'})

r = api.get('https://www.google.com/search')
html = r['body']

const { CrawlingAPI } = require('crawlbase');
const api = new CrawlingAPI({ token: 'YOUR_TOKEN' });

const r = await api.get('https://www.google.com/search');

Parameter, die zählen

URL-Muster, die Accounts abrufen

Felder, die Sie bekommen

Strukturierte Daten, die Crawlbase auf google.com gefunden hat, nach Seitentyp. Das sind die schema.org-Typen in der Seite, die Felder, die Ihr Parser direkt aus dem JSON-LD-Block lesen kann:

• Sonstige: FAQPage, VideoObject

Was kaputtgeht, und die Lösung

Bei den Fehlern seit 14 Aug 2026 hat die Website geantwortet mit:

Nach Zeitplan ausführen

Suche ist die teure Seite einer Website. Halten Sie die Liste der Suchanfragen kurz, fahren Sie sie in einem Rhythmus über den Crawler mit Callback und rufen Sie danach nur die Ergebnisseiten ab, die Sie brauchen. Die mittlere Antwort auf dieser Website liegt bei 1.9s.

Fragen

Weitere Seiten auf google.com

Seiten, die google.com in den eigenen Sitemaps führt, am 6 Sep 2026 von Crawlbase abgerufen und in 2 aufeinanderfolgenden Läufen bestätigt. Jede Zeile ist der günstigste Call, der die Seite mit Inhalt zurückgab.