How do I scrape DuckDuckGo search results?

Send the DuckDuckGo results URL to the Crawlbase Crawling API with your token. Crawlbase rotates a residential proxy, renders the page in a real browser, clears bot checks, and returns the fully rendered HTML with the organic results in place. Add scraper=generic-extractor to get structured JSON instead.

Can I get DuckDuckGo results as JSON?

Yes. By default the Crawling API returns rendered HTML; add the generic extractor (scraper=generic-extractor) to receive title, meta, content, images and links as JSON, or parse the HTML yourself for result titles, snippets and URLs.

Does it render the JavaScript results?

Yes. DuckDuckGo loads its results dynamically with JavaScript. A real browser executes the page, so the organic results render before capture, not just the initial shell.

How do I avoid getting blocked scraping DuckDuckGo?

Crawlbase routes each request through rotating residential IPs across 30 geographies and clears bot checks and rate limits automatically. You do not manage proxies or solve CAPTCHAs, and there is nothing to maintain when DuckDuckGo changes its setup.

Can I track keyword rankings on DuckDuckGo?

Yes. Crawl a results URL per query and geography on a schedule, then read the ranked result titles and URLs from the HTML or JSON to track positions over time.

Which DuckDuckGo pages can I crawl?

Any public results URL: standard queries, the HTML endpoint, web and news verticals, and region or time filtered searches. The same API works on any other site too.

How much does it cost?

Start free with up to 20,000 requests and no credit card. Paid plans scale with usage, and the same token works across the Crawling API and every Crawlbase scraper.

Crawling API / DuckDuckGo

DuckDuckGo Scraper.
Jedes Ergebnis, vollständig gerendert.

Senden Sie eine beliebige DuckDuckGo-Ergebnis-URL und erhalten Sie das vollständig gerenderte HTML zurück, über Residential Proxies mit integriertem Anti-Bot-Handling.
Verwandeln Sie es mit dem generic extractor in JSON.

Kostenlos starten Live ansehen

99% Erfolgsrate140M Residential IPs30 Regionen

Live-Crawl-Feed · DuckDuckGo1.24M req/minStreaming

200duckduckgo.com/?q=link+buildingIN218ms

200duckduckgo.com/html/?q=best+vpnES134ms

200duckduckgo.com/?q=web+scraping+api&ia=webAU189ms

200duckduckgo.com/?q=link+buildingES132ms

200duckduckgo.com/?q=cloud+hostingFR164ms

200duckduckgo.com/?q=link+buildingBR153ms

200duckduckgo.com/?q=ecommerce+platform&t=h_NL181ms

200duckduckgo.com/?q=cloud+hostingIN135ms

200duckduckgo.com/?q=link+buildingGB142ms

200duckduckgo.com/?q=web+scraping+api&ia=webES169ms

301duckduckgo.com/?q=residential+proxyAU192ms

200duckduckgo.com/?q=web+scraping+api&ia=webCA162ms

200duckduckgo.com/?q=ecommerce+platform&t=h_FR190ms

200duckduckgo.com/?q=web+scraping+api&ia=webUS64ms

200duckduckgo.com/?q=web+scraping+api&ia=webSG72ms

301duckduckgo.com/html/?q=privacy+browserSG198ms

404duckduckgo.com/?q=electric+cars&ia=webIN196ms

301duckduckgo.com/?q=ecommerce+platform&t=h_GB197ms

200duckduckgo.com/?q=web+scrapingNL42ms

200duckduckgo.com/?q=electric+cars&ia=webBR127ms

200duckduckgo.com/html/?q=privacy+browserIN114ms

200duckduckgo.com/?q=crm+softwareES167ms

200duckduckgo.com/?q=ecommerce+platform&t=h_IN183ms

301duckduckgo.com/?q=residential+proxyGB216ms

200duckduckgo.com/html/?q=best+vpnDE168ms

200duckduckgo.com/html/?q=best+vpnUS190ms

200duckduckgo.com/?q=link+buildingIN218ms

200duckduckgo.com/html/?q=best+vpnES134ms

200duckduckgo.com/?q=web+scraping+api&ia=webAU189ms

200duckduckgo.com/?q=link+buildingES132ms

200duckduckgo.com/?q=cloud+hostingFR164ms

200duckduckgo.com/?q=link+buildingBR153ms

200duckduckgo.com/?q=ecommerce+platform&t=h_NL181ms

200duckduckgo.com/?q=cloud+hostingIN135ms

200duckduckgo.com/?q=link+buildingGB142ms

200duckduckgo.com/?q=web+scraping+api&ia=webES169ms

301duckduckgo.com/?q=residential+proxyAU192ms

200duckduckgo.com/?q=web+scraping+api&ia=webCA162ms

200duckduckgo.com/?q=ecommerce+platform&t=h_FR190ms

200duckduckgo.com/?q=web+scraping+api&ia=webUS64ms

200duckduckgo.com/?q=web+scraping+api&ia=webSG72ms

301duckduckgo.com/html/?q=privacy+browserSG198ms

404duckduckgo.com/?q=electric+cars&ia=webIN196ms

301duckduckgo.com/?q=ecommerce+platform&t=h_GB197ms

200duckduckgo.com/?q=web+scrapingNL42ms

200duckduckgo.com/?q=electric+cars&ia=webBR127ms

200duckduckgo.com/html/?q=privacy+browserIN114ms

200duckduckgo.com/?q=crm+softwareES167ms

200duckduckgo.com/?q=ecommerce+platform&t=h_IN183ms

301duckduckgo.com/?q=residential+proxyGB216ms

200duckduckgo.com/html/?q=best+vpnDE168ms

200duckduckgo.com/html/?q=best+vpnUS190ms

01 Live-Demo

Eine beliebige DuckDuckGo-URL rein. HTML oder JSON raus.

Die Crawling API, live getippt. Erhalten Sie das gerenderte HTML, oder wechseln Sie zum generic extractor für JSON. Fahren Sie mit der Maus darüber, um anzuhalten und mitzulesen.

bereit

Tasten 1-2 wechseln · klicken zum Pausiereneigene URL ausführen

Führen Sie Ihren ersten Request in Minuten aus. Bis zu 20,000 kostenlose Requests, keine Kreditkarte.Kostenlos starten

02 Funktionen

Eine API für alles, was DuckDuckGo Ihnen entgegenwirft.

DuckDuckGo rendert seine Ergebnisse mit JavaScript und löst bei Volumen Rate Limits und Bot-Prüfungen aus. Die Crawling API rendert es in einem echten Browser, erreicht es über Residential IPs und liefert Ihnen sauberes HTML oder JSON.

render

Vollständiges JavaScript-Rendering

Ein echter Browser führt die Seite aus, sodass die dynamisch geladenen organischen Ergebnisse, Titel, Snippets und Links alle erfasst werden, nicht nur die anfängliche Hülle.

proxies

140M Residential IPs

Jeder Request rotiert eine Residential IP über 30 Regionen, sodass Sie DuckDuckGo wie ein echter lokaler Suchender erreichen und lokale Rankings sehen.

anti-bot

Blockaden für Sie gelöst

CAPTCHAs, Bot-Walls und Rate Limits werden automatisch beseitigt. Nichts zu lösen, nichts zu warten.

format

HTML oder JSON

Erhalten Sie das vollständig gerenderte HTML, oder fügen Sie scraper=generic-extractor hinzu, um Titel, Content, Bilder und Links als strukturiertes JSON zurückzugeben.

extras

Screenshots und async

Derselbe Aufruf kann einen Ganzseiten-Screenshot erfassen oder asynchron mit Webhooks und Cloud Storage laufen.

one token

Eine API für jede Website

Die Crawling API funktioniert mit jeder URL, sodass derselbe Token DuckDuckGo und alles andere abdeckt, was Sie crawlen. Live-Demo ansehen.

03 Output

Gerendertes HTML, oder sauberes JSON.

Standardmäßig erhalten Sie das gerenderte HTML. Fügen Sie den generic-extractor hinzu, und dieselbe Seite kommt als typisiertes JSON zurück.

{ "title": "web scraping at DuckDuckGo", "favicon": "https://duckduckgo.com/favicon.ico", "meta": { "description": "DuckDuckGo. Privacy, simplified.", "keywords": "..." }, "content": "Organic results, titles, snippets and result URLs for the query...", "canonical": "https://duckduckgo.com/?q=web+scraping", "images": [ "..." ], "og_images": [ "..." ], "links": [ "..." ] }

Page

title · string canonical · string favicon · string

Content

content · string

Media

images · array og_images · array

Links

links · array

04 So funktioniert es

Von der URL zu Daten in einem Aufruf.

Jeder DuckDuckGo-Request durchläuft denselben Pfad. Sie senden eine URL, wir betreiben alles dazwischen.

URL senden

Übergeben Sie eine beliebige öffentliche DuckDuckGo-Ergebnis-URL mit Ihrem Token: eine Query, den HTML-Endpoint, eine Vertikale oder eine gefilterte Suche.

Proxy rotieren

Eine Residential IP und Region, die DuckDuckGo sauber erreichen, gezogen aus 140M IPs über 30 Regionen.

Seite rendern

Ein echter Browser lädt die Seite, sodass die per JavaScript gerenderten organischen Ergebnisse, Titel und Snippets vor der Erfassung gerendert werden.

Anti-Bot beseitigen

Die Rate Limits und Bot-Prüfungen von DuckDuckGo werden automatisch gehandhabt. Nichts zu lösen, nichts zu warten.

HTML oder JSON zurückgeben

Das vollständig gerenderte HTML kommt zurück, oder typisiertes JSON, wenn Sie den generic extractor hinzufügen.

05 Anwendungsfälle

Was Teams auf DuckDuckGo-Daten aufbauen.

USE / 01Rankings

Keyword-Rank-Tracking

Crawlen Sie eine Ergebnis-URL pro Query und Region nach Zeitplan, um Positionen und Rankingänderungen im Zeitverlauf zu verfolgen.

USE / 02SERP

SERP-Monitoring

Beobachten Sie Ergebnisseiten auf neue Einträge, Feature-Änderungen und Bewegungen über die Queries, die Ihnen wichtig sind.

USE / 03SEO-Recherche

SEO-Recherche

Ziehen Sie gerankte Titel, Snippets und Ergebnis-URLs, um Intent, Wettbewerber und Content-Lücken zu untersuchen.

USE / 04Discovery

Lead- & Link-Discovery

Fördern Sie Domains, Profile und Seiten zutage, die für Ihre Begriffe ranken, um Outreach und Link-Prospecting zu speisen.

USE / 05Training

Trainingsdaten & RAG

Speisen Sie sauberen Ergebnistext und Ergebnis-URLs über eine API in Modelle, RAG-Pipelines und Agenten.

USE / 06Abdeckung

Jede URL, eine API

Crawlen Sie Queries, den HTML-Endpoint, Vertikalen und Filter, plus jede andere Website, die Sie benötigen.

06 Hinweise

Gut zu wissen beim Scrapen von DuckDuckGo.

Gerendert wie ein echter Browser

DuckDuckGo lädt seine Ergebnisse dynamisch mit JavaScript; die Crawling API führt einen echten Browser aus, sodass die organischen Ergebnisse vor der Erfassung gerendert werden.

HTML standardmäßig, JSON auf Anfrage

Sie erhalten das vollständig gerenderte HTML. Fügen Sie scraper=generic-extractor für geparste Titel, Content, Bilder und Links hinzu, oder parsen Sie das HTML selbst für Ergebnistitel, Snippets und URLs.

Ergebnisse nach Region lokalisieren

Geotargeting wählt die Proxy-Region, sodass Sie Rankings so lesen können, wie ein Suchender in einem bestimmten Land sie sehen würde.

DuckDuckGo von überall erreichen

Rotation über 30 Regionen und 140M Residential IPs bedeutet konstanten Zugriff bei Volumen, ohne Proxys zu verwalten oder Rate Limits auszulösen.

07 Warum Crawlbase

Gebaut, um DuckDuckGo im großen Maßstab zu crawlen.

Die Crawling API läuft auf demselben Netzwerk, das 46,000+ zahlende Kunden und 70,000+ Entwickler bedient. Keine Proxys zu kaufen, keine Browser zu betreiben, nichts zu patchen, wenn DuckDuckGo sich ändert.

99%

Durchschnittliche Erfolgsrate der Requests

140M

Residential IPs, plus 98M Datacenter

Regionen für präzise lokale Ergebnisse

20/s

Requests pro Sekunde standardmäßig, mehr auf Anfrage

Ein Token, offizielle SDKs für Python, Node und Ruby, und darunter ein Netzwerk mit 99.99% Verfügbarkeit.

08 FAQ

Fragen zum Scrapen von DuckDuckGo.

Senden Sie die DuckDuckGo-Ergebnis-URL mit Ihrem Token an die Crawlbase Crawling API. Crawlbase rotiert einen Residential Proxy, rendert die Seite in einem echten Browser, beseitigt Bot-Prüfungen und gibt das vollständig gerenderte HTML mit den organischen Ergebnissen zurück. Fügen Sie scraper=generic-extractor hinzu, um stattdessen strukturiertes JSON zu erhalten.

Ja. Standardmäßig gibt die Crawling API gerendertes HTML zurück; fügen Sie den generic extractor (scraper=generic-extractor) hinzu, um Titel, Meta, Content, Bilder und Links als JSON zu erhalten, oder parsen Sie das HTML selbst für Ergebnistitel, Snippets und URLs.

Ja. DuckDuckGo lädt seine Ergebnisse dynamisch mit JavaScript. Ein echter Browser führt die Seite aus, sodass die organischen Ergebnisse vor der Erfassung gerendert werden, nicht nur die anfängliche Hülle.

Crawlbase leitet jeden Request über rotierende Residential IPs über 30 Regionen und beseitigt Bot-Prüfungen und Rate Limits automatisch. Sie verwalten keine Proxys und lösen keine CAPTCHAs, und es gibt nichts zu warten, wenn DuckDuckGo sein Setup ändert.

Ja. Crawlen Sie eine Ergebnis-URL pro Query und Region nach Zeitplan, und lesen Sie dann die gerankten Ergebnistitel und URLs aus dem HTML oder JSON, um Positionen im Zeitverlauf zu verfolgen.

Jede öffentliche Ergebnis-URL: Standard-Queries, den HTML-Endpoint, Web- und News-Vertikalen sowie nach Region oder Zeit gefilterte Suchen. Dieselbe API funktioniert auch mit jeder anderen Website.

Starten Sie kostenlos mit bis zu 20,000 Requests und ohne Kreditkarte. Kostenpflichtige Pläne skalieren mit der Nutzung, und derselbe Token funktioniert über die Crawling API und jeden Crawlbase-Scraper hinweg.

Beginnen Sie, DuckDuckGo zu scrapen.
Verfolgen Sie Rankings ohne die Blockaden.

Kostenlos beginnen mit bis zu 20,000 Requests. Ein Token für die Crawling API und jeden Scraper.

Kostenlos starten Zur Dokumentation