book-Seiten auf goodreads.com scrapen

Über goodreads.com

goodreads.com beschreibt sich selbst als „Finden und lesen Sie mehr Bücher, die Sie lieben werden, und behalten Sie die Bücher im Blick, die Sie lesen möchten. Werden Sie Teil der weltweit größten Community von Buchliebhabern auf Goodreads“.

Die robots.txt nennt 16 Sitemaps und sperrt 12 Pfade, darunter /admin, /api, /ebooks. Sie bittet Crawler um 5s Pause zwischen Requests.

Gemessen auf Crawlbase

Erfolgsquote über jeden Request jedes Accounts im August 2026: 99.4%. Muster, Länder und Fehler stammen aus dem Request-Log seit 14 Aug 2026; 97.5% der erfolgreichen Aufrufe nutzten den JavaScript-Token, die mittlere Antwort dauerte 10.0s.

Unter den 3 Bücher und Audio-Websites im Cookbook steht goodreads.com nach Erfolgsrate auf Platz 2 von 3; der Median der Kategorie liegt bei 99.4%. Die mittlere Antwort von 10.0s liegt auf dem Kategorie-Median von 10.0s. 1 der 3 nehmen den einfachen Token an; diese Website braucht den JavaScript-Token.

Der Call

Produktseiten sind die Form, die die Accounts hier am häufigsten abrufen, mit dem Land und dem Token, die am häufigsten Erfolg haben. Ersetzen Sie den Platzhalterpfad durch eine echte Produkt-URL der Website.

curl "https://api.crawlbase.com/?token=YOUR_JS_TOKEN&url=https%3A%2F%2Fwww.goodreads.com%2Fbook%2Fexample-section%2Fexample-page"

from crawlbase import CrawlingAPI
api = CrawlingAPI({'token': 'YOUR_JS_TOKEN'})

r = api.get('https://www.goodreads.com/book/example-section/example-page')
html = r['body']

const { CrawlingAPI } = require('crawlbase');
const api = new CrawlingAPI({ token: 'YOUR_JS_TOKEN' });

const r = await api.get('https://www.goodreads.com/book/example-section/example-page');

Parameter, die zählen

URL-Muster, die Accounts abrufen

Felder, die Sie bekommen

Eine Produktseite trägt meist einen ld+json-Product-Block mit Name, Preis, Währung und Verfügbarkeit und dieselben Werte im sichtbaren Markup. Lesen Sie zuerst den Block; er ändert sich seltener als das Layout.

Was kaputtgeht, und die Lösung

Bei den Fehlern seit 14 Aug 2026 hat die Website geantwortet mit:

Nach Zeitplan ausführen

Eine Katalogaktualisierung ist eine Liste von Produkt-URLs. Übergeben Sie sie mit einem Callback an den Crawler, lassen Sie ihn die Calls takten und wiederholen, was die Website ablehnt, und lesen Sie die Ergebnisse aus dem Cloud Storage. Die mittlere Antwort auf dieser Website liegt bei 10.0s.

Fragen

Weitere Seiten auf goodreads.com

Seiten, die goodreads.com in den eigenen Sitemaps führt, am 6 Sep 2026 von Crawlbase abgerufen und in 2 aufeinanderfolgenden Läufen bestätigt. Jede Zeile ist der günstigste Call, der die Seite mit Inhalt zurückgab.