doc-Seiten auf ietf.org scrapen
Der Aufruf, der heute doc-Seiten von ietf.org liefert, mit den Parametern, Mustern und Fehlerbildern aus dem Request-Log seit 14 Aug 2026.
Gemessen auf Crawlbase
Erfolgsquote über jeden Request jedes Accounts im August 2026: 95.8%. Muster, Länder und Fehler stammen aus dem Request-Log seit 14 Aug 2026; 85.2% der erfolgreichen Aufrufe nutzten den JavaScript-Token, die mittlere Antwort dauerte 7.5s.
Unter den 11 Tech und Entwickler-Websites im Cookbook steht ietf.org nach Erfolgsrate auf Platz 9 von 11; der Median der Kategorie liegt bei 97.8%. Die mittlere Antwort von 7.5s ist langsamer als der Kategorie-Median von 1.9s. 8 der 11 nehmen den einfachen Token an; diese Website nur auf manchen Seiten.
Der Call
Die häufigste Form der URL, die die Accounts abrufen, mit dem country und dem Token, die am häufigsten erfolgreich sind. Ersetzen Sie den Platzhalter-Pfad durch einen echten Pfad der Website.
curl "https://api.crawlbase.com/?token=YOUR_TOKEN&url=https%3A%2F%2Fwww.ietf.org%2Fdoc%2Fexample-page%2F1234567"from crawlbase import CrawlingAPI api = CrawlingAPI({'token': 'YOUR_TOKEN'}) r = api.get('https://www.ietf.org/doc/example-page/1234567') html = r['body']
const { CrawlingAPI } = require('crawlbase'); const api = new CrawlingAPI({ token: 'YOUR_TOKEN' }); const r = await api.get('https://www.ietf.org/doc/example-page/1234567');
Parameter, die zählen
| Parameter | Wert | Warum |
|---|---|---|
country | nicht setzen | Die meisten erfolgreichen Calls setzen kein country (100%) und sind zu 95.6% erfolgreich. |
javascript | nicht setzen | Calls mit normalem Token sind zu 97.0% erfolgreich, Calls mit JavaScript-Token zu 95.4%. Beides funktioniert; beginnen Sie ohne Browser und wechseln Sie pro URL-Muster dort, wo die Tabelle unten es zeigt. |
URL-Muster, die Accounts abrufen
| Muster | Anteil der Erfolge | JavaScript-Token | Country | Query-Parameter |
|---|---|---|---|---|
/doc/{slug}/{id} | 62.0% | 83.9% | keine | keine |
/doc/{slug} | 34.3% | 80.3% | keine | keine |
Felder, die Sie bekommen
Die Felder hängen vom Seitentyp ab. Produktseiten tragen meist einen ld+json-Block mit Name, Preis, Währung und Verfügbarkeit, Artikelseiten eine Überschrift und den Text; prüfen Sie die erste Antwort, die Sie erhalten.
Was kaputtgeht, und die Lösung
Bei den Fehlern seit 14 Aug 2026 hat die Website geantwortet mit:
Nach Zeitplan ausführen
Die mittlere Antwortzeit auf dieser Website liegt bei 7.5s. Übergeben Sie für alles über ein paar tausend Seiten pro Tag eine URL-Liste mit Callback an den Crawler; er taktet die Calls und wiederholt, was die Website ablehnt.
Fragen
Brauche ich einen Browser, um ietf.org zu scrapen?
Das hängt von der Seite ab. Calls mit normalem Token sind zu 97.0% erfolgreich, Calls mit JavaScript-Token zu 95.4%; die Tabelle der URL-Muster zeigt, welche Pfade Accounts mit Browser abrufen.
Was kostet eine ietf.org-Seite auf Crawlbase?
1 Credit ohne Browser. ietf.org liegt in der Stufe standard.
Welches country sollte ich für ietf.org setzen?
Keines nötig: Die meisten erfolgreichen Calls lassen es ungesetzt.