Suchergebnisse auf lidl.com scrapen

Gemessen auf Crawlbase

Erfolgsquote über jeden Request jedes Accounts im August 2026: 97.9%. Muster, Länder und Fehler stammen aus dem Request-Log seit 14 Aug 2026; 1.1% der erfolgreichen Aufrufe nutzten den JavaScript-Token, die mittlere Antwort dauerte 3.7s.

Unter den 9 Lebensmittel-Websites im Cookbook steht lidl.com nach Erfolgsrate auf Platz 6 von 9; der Median der Kategorie liegt bei 98.8%. Die mittlere Antwort von 3.7s ist langsamer als der Kategorie-Median von 2.6s. 5 der 9 nehmen den einfachen Token an, diese Website auch.

Der Call

Suchergebnisseiten sind die Form, die die Accounts hier am häufigsten abrufen, mit dem Land und dem Token, die am häufigsten Erfolg haben. Ersetzen Sie die Platzhalter-Suchanfrage durch Ihre eigene.

curl "https://api.crawlbase.com/?token=YOUR_TOKEN&country=US&url=https%3A%2F%2Fwww.lidl.com%2Fs%2Fexample-page%2Fexample-page"

from crawlbase import CrawlingAPI
api = CrawlingAPI({'token': 'YOUR_TOKEN'})

r = api.get('https://www.lidl.com/s/example-page/example-page', {'country': 'US'})
html = r['body']

const { CrawlingAPI } = require('crawlbase');
const api = new CrawlingAPI({ token: 'YOUR_TOKEN' });

const r = await api.get('https://www.lidl.com/s/example-page/example-page', { country: 'US' });

Parameter, die zählen

URL-Muster, die Accounts abrufen

Felder, die Sie bekommen

Eine Suchseite trägt eine Ergebnisliste mit je Titel, Link und meist Preis oder Snippet. Blättern Sie mit dem Seitenparameter der Website und hören Sie auf, wenn sich eine Seite wiederholt.

Was kaputtgeht, und die Lösung

Bei den Fehlern seit 14 Aug 2026 hat die Website geantwortet mit:

Nach Zeitplan ausführen

Suche ist die teure Seite einer Website. Halten Sie die Liste der Suchanfragen kurz, fahren Sie sie in einem Rhythmus über den Crawler mit Callback und rufen Sie danach nur die Ergebnisseiten ab, die Sie brauchen. Die mittlere Antwort auf dieser Website liegt bei 3.7s.

Fragen