# Das API-Crawling in wenigen Minuten
Wir haben eine API erstellt, um die Crawlbase-Integration in Ihr Erkundungsprojekt ganz einfach umzusetzen.
# Ihr erster Aufruf API
Alle API-URLs beginnen mit der folgenden Basis: https://api.crawlbase.com
Daher ist es ganz einfach, Ihren ersten Antrag zu erfüllen, indem Sie die nächste Linie ins Terminal ausführen.
Mach weiter und probiere es aus!
curl 'https://api.crawlbase.com/?token=_USER_TOKEN_&url=https%3A%2F%2Fgithub.com%2Fcrawlbase%3Ftab%3Drepositories'
Allerdings ist die normale Nutzung nicht ausreichend, da die Website nicht über die Funktion verfügt, dass die Browser JavaScript aktivieren. Daher müssen Sie den Inhalt nicht über den JavaScript-Client übertragen, damit Sie ihn nutzen können Ihr JavaScript.
Allez-y et essayez l'exploration JS !
curl 'https://api.crawlbase.com/?token=_JS_TOKEN_&url=https%3A%2F%2Fgithub.com%2Fcrawlbase%3Ftab%3Drepositories'
Notizen hier POSTEZ Die Forderungen sind auch kostenpflichtig. Sie finden [alles hier]/fr/crawling-api/post/), um weitere Informationen zu erhalten oder mit den API-Parametern fortzufahren.
# Kostenlose Testversion
Die 1,000 Premieren sind kostenlos.
Stellen Sie sicher, dass Sie den Beitrag kostenlos nutzen!
# Steuergrenze
Die API ist auf eine maximale Belastung begrenzt 20 Anfragen pro Sekunde, jeton (die Belastungsgrenze kann auf Anfrage erhöht werden).
Cela bedeutet, dass Sie einen Gesandten haben Nur 20 Anfragen pro Sekunde, also etwa 51 Millionen Anfragen pro Monat, was bedeutet, dass die Anzahl der Threads, die verwendet werden sollen.
Die API antwortet mit 429
Code d'état lorsque la limite de bit est dépassée.
Hinweis: Bestimmte Websites weisen möglicherweise Einschränkungen auf. Wenn Sie über Grenzen und Höhenunterschiede auf der Ceux-Ci verfügen, sehen Sie sich das an Kontaktieren Sie die Support-Technik (ein neues Fenster) (öffnet neues Fenster).
# API-Antwortzeit
Die Reaktionszeit der API beträgt mehr als 4 und 10 Sekunden Wir empfehlen Definieren Sie eine Wartezeit von mindestens 90 Sekunden für die Äpfel.
# Erfolg vs. Misserfolg
Wir stellen nur die Anforderungen an (siehe [Ursprungsstatus]/fr/crawling-api/response/#original-status) und PC-Staat (in den Parametern der jeweiligen Reaktion).
# Autres Notizen
- Wenn Sie lieber eine Bibliothek zur Integration von Crawlbase nutzen möchten, können Sie die verfügbaren Bibliotheken sehen API-Bibliotheken hier (ein neues Fenster veröffentlicht) (öffnet neues Fenster).
- Es wird empfohlen, die Datei gzip Accept-Encoding zu verwenden.
- Wenn Sie Scrapy für Python verwenden, stellen Sie sicher, dass Sie dies tun DNS-Cache deaktivieren (neues Fenster öffnen) (öffnet neues Fenster).
# Authentification
Für die Nutzung der API benötigen Sie unbedingt Authentifizierungsdaten.
Sie verfügen über zwei Jetons; Eine für normale Anforderungen und eine weitere für JavaScript-Anforderungen (Spielnavigatoren).
Jeton normal
_USER_TOKEN_
Jeton JavaScript
_JS_TOKEN_