Cookbook·Öffentliche Daten·nyc.gov
nyc.gov scrapen
Der Aufruf, der heute Seiten von nyc.gov liefert, mit den Parametern, Mustern und Fehlerbildern aus dem Request-Log seit 14 Aug 2026. Zuletzt getestet am 6 Sep 2026.
92.0% Erfolg · Aug 2026Browser bei 12% der CallsStandard-Preis · 1 Credit
Über nyc.gov
nyc.gov beschreibt sich selbst als „Auf der Startseite von nyc.gov können Sie den heutigen Status von Parken, Schulen und Müllabfuhr prüfen. Außerdem finden Sie beliebte Services, Nachrichten und Neuigkeiten der Stadtverwaltung von New York“.
Die Sitemaps führen 11.718 URLs in 8 Dateien (nycgov.sitemap.mayors-office-nycgov-sitemap, nycgov.sitemap.jobs-nycgov-sitemap, nycgov.sitemap.mayors-office-nycgov-sitemap-2, nycgov.sitemap.main-nycgov-sitemap). 250 der 11.718 datierten Einträge haben sich in den letzten 30 Tagen geändert, der neueste am 4 Sep 2026.
Die robots.txt sperrt 1 Pfad.
Gemessen auf Crawlbase
Erfolgsquote über jeden Request jedes Accounts im August 2026: 92.0%. Muster, Länder und Fehler stammen aus dem Request-Log seit 14 Aug 2026; 11.8% der erfolgreichen Aufrufe nutzten den JavaScript-Token, die mittlere Antwort dauerte 1.8s.
Unter den 11 Öffentliche Daten-Websites im Cookbook steht nyc.gov nach Erfolgsrate auf Platz 10 von 11; der Median der Kategorie liegt bei 97.2%. Die mittlere Antwort von 1.8s ist schneller als der Kategorie-Median von 2.3s. 5 der 11 nehmen den einfachen Token an; diese Website nur auf manchen Seiten.
Der Call
Die häufigste Form der URL, die die Accounts abrufen, mit dem country und dem Token, die am häufigsten erfolgreich sind. Ersetzen Sie den Platzhalter-Pfad durch einen echten Pfad der Website.
curl "https://api.crawlbase.com/?token=YOUR_TOKEN&url=https%3A%2F%2Fwww.nyc.gov%2Fexample-section%2Fexample-page%2Fexample-page"from crawlbase import CrawlingAPI api = CrawlingAPI({'token': 'YOUR_TOKEN'}) r = api.get('https://www.nyc.gov/example-section/example-page/example-page') html = r['body']
const { CrawlingAPI } = require('crawlbase'); const api = new CrawlingAPI({ token: 'YOUR_TOKEN' }); const r = await api.get('https://www.nyc.gov/example-section/example-page/example-page');
Parameter, die zählen
| Parameter | Wert | Warum |
|---|---|---|
country | nicht setzen | Die meisten erfolgreichen Calls setzen kein country (99.8%) und sind zu 90.4% erfolgreich. |
javascript | nicht setzen | Calls mit normalem Token sind zu 89.1% erfolgreich und machen 87.4% des Traffics aus. Ein Browser kostet mehr und bringt auf dieser Website nichts. |
URL-Muster, die Accounts abrufen
| Muster | Anteil der Erfolge | JavaScript-Token | Country | Query-Parameter |
|---|---|---|---|---|
/{slug}/{slug}/{slug} | 92.0% | 32.9% | keine | hid_borough, hid_block, hid_lot |
Felder, die Sie bekommen
Die Felder hängen vom Seitentyp ab. Produktseiten tragen meist einen ld+json-Block mit Name, Preis, Währung und Verfügbarkeit, Artikelseiten eine Überschrift und den Text; prüfen Sie die erste Antwort, die Sie erhalten.
Was kaputtgeht, und die Lösung
Bei den Fehlern seit 14 Aug 2026 hat die Website geantwortet mit:
410: 46.2% der Fehler 410 heißt, die Website hat den Abruf abgelehnt. Behandeln Sie es wie eine Sperre: einmal mit dem JavaScript-Token und dem Land der erfolgreichen Calls wiederholen, dann aufhören.
404: 30.4% der Fehler Beachten Sie, dass ein 404 in diesen Zahlen als Erfolg zählt: Die Website hat geantwortet und die Seite ist weg. Werten Sie ihn als weg, nicht als Wiederholung.
0: 16.1% der Fehler Ein Status 0 ist ein Request, der innerhalb des Timeouts nie eine Antwort bekommen hat. Wiederholen Sie einmal mit dem JavaScript-Token, wenn das Muster einen Browser braucht.
Nach Zeitplan ausführen
Die mittlere Antwortzeit auf dieser Website liegt bei 1.8s. Übergeben Sie für alles über ein paar tausend Seiten pro Tag eine URL-Liste mit Callback an den Crawler; er taktet die Calls und wiederholt, was die Website ablehnt.
Fragen
Brauche ich einen Browser, um nyc.gov zu scrapen?
Nein. 89.1% der Calls mit normalem Token sind erfolgreich und Accounts senden 87.4% ihres Traffics ohne Browser.
Was kostet eine nyc.gov-Seite auf Crawlbase?
1 Credit ohne Browser. nyc.gov liegt in der Stufe standard.
Welches country sollte ich für nyc.gov setzen?
Keines nötig: Die meisten erfolgreichen Calls lassen es ungesetzt.
Weitere Seiten auf nyc.gov
Seiten, die nyc.gov in den eigenen Sitemaps führt, am 6 Sep 2026 von Crawlbase abgerufen und in 2 aufeinanderfolgenden Läufen bestätigt. Jede Zeile ist der günstigste Call, der die Seite mit Inhalt zurückgab.
| Seite | Beispiel | Token | Land | Median |
|---|---|---|---|---|
Startseite/ | nyc.gov/ | Einfach | keine | 4.4s |
Suche/{slug}/search | keine | Einfach | keine | 1.4s |
Detailseite/{slug}/{slug}/{slug} | keine | Einfach | keine | 2.9s |
Artikel/{slug}/news/{id} | keine | Einfach | keine | 2.6s |
Sonstige/{slug}/{slug}/{slug} | keine | Einfach | keine | 3.0s |
Website-Namen bezeichnen die Seiten, die ein Rezept abruft. Crawlbase ist mit keiner gelisteten Website verbunden. Nutzen Sie Rezepte im Rahmen der Nutzungsrichtlinie.Gemessene Zahlen aus August 2026, monatlich aktualisiert