So extrahieren Sie gesponserte Anzeigen von Walmart
11. Dezember 202347 Minuten gelesen
Von Walmart gesponserte Anzeigen sind ein wichtiger Bestandteil der Werbeplattform von Walmart und ermöglichen es Verkäufern, ihre Produkte einem breiteren Publikum vorzustellen. Durch strategische Platzierungen auf der Walmart-Website können Verkäufer mit diesen bezahlten Anzeigen die Aufmerksamkeit potenzieller Kunden gewinnen, die aktiv nach Produkten suchen oder stöbern.
In diesem Blogbeitrag untersuchen wir die Bedeutung der Datenextraktion aus von Walmart gesponserten Anzeigen für Unternehmen und Vermarkter mithilfe von JavaScript und Crawlbase Crawling API. Durch Walmart verschrotten und erhalten Sie Details wie Produktinformationen, gebühr, Kennzahlen zur Anzeigenleistung und Walmart Bestsellerkönnen Sie wertvolle Einblicke in Markttrends und Verbraucherverhalten gewinnen. Die extrahierten Daten ermöglichen es Verkäufern, fundierte Entscheidungen zu treffen, ihre Werbekampagnen zu verfeinern und in der dynamischen E-Commerce-Landschaft wettbewerbsfähig zu bleiben.
Bei Walmart Advertising werden verschiedene Schlüsselelemente erfasst, die umfassende Einblicke in die beworbenen Produkte und ihre Leistung bieten. Hier sind die wesentlichen zu extrahierenden Datenelemente:
Auszug aus den Walmart-Produktdetails:
Detaillierter Auszug Walmart Produktdaten Informationen über die geförderten search, einschließlich Produktnamen, Beschreibungen und Spezifikationen. Das Verständnis der Nuancen jedes Produkts verbessert den gesamten Datensatz.
Auszug der Walmart-Preisinformationen:
Scrape Walmart-Preisdetails mit den gesponserten Produkten verbunden. Dazu gehören reguläre Preise, etwaige ermäßigte Preise und Einzelheiten zu Sonderangeboten oder Werbeaktionen. Genaue Preisinformationen sind für die Marktanalyse und die Wettbewerbspositionierung von entscheidender Bedeutung.
Auszug aus Walmart-Werbetext:
Rufen Sie alle Werbetexte ab, die mit den gesponserten Produkten in Zusammenhang stehen. Dies können Slogans, Sonderangebote oder Alleinstellungsmerkmale sein, mit denen Verkäufer Kunden anlocken.
Auszug aus Walmart-Produktbildern:
Sammeln Sie Bilder, die mit den gesponserten Produkten in Zusammenhang stehen. Bilder beeinflussen die Kaufentscheidungen von Kunden maßgeblich und der Zugriff auf visuelle Elemente kann die Qualität Ihres Datensatzes verbessern.
Extrahieren Sie die Leistungsmetriken für Walmart-Anzeigen:
Extrahieren Sie Kennzahlen zur Leistung der gesponserten Anzeigen. Dazu gehören Daten wie Klickraten, Impressionen und Konversionsraten. Die Analyse dieser Kennzahlen liefert wertvolle Einblicke in die Wirksamkeit der Werbekampagne.
Einrichten der Umgebung
Registrieren Sie sich bei Crawlbase:
Gehen Sie zu Crawlbase und melden Sie sich für ein kostenloses Konto an. Sie können Ihr privates Token im Abschnitt „Kontodokumentation“ erhalten.
Installieren Sie die Crawlbase Node.js-Bibliothek:
Upewnij się, że Node.js auf Ihrem Computer installiert. Wenn nicht, laden Sie es von der offiziellen Node.js-Website herunter und installieren Sie es. Öffnen Sie nach der Installation Ihr Terminal und geben Sie den folgenden Befehl ein:
npm install crawlbase
Dieser Befehl lädt die Crawlbase Node.js-Bibliothek herunter und installiert sie auf Ihrem Computer.
Erstellen Sie eine Datei für Walmart Scraper:
Erstellen Sie mit einem Texteditor oder einer IDE eine Datei mit dem Namen „walmart-scraper.js“. Wenn Sie die Befehlszeile verwenden, führen Sie Folgendes aus:
touch walmart-scraper.js
Dieser Befehl erstellt eine leere Datei. Öffnen Sie sie mit Ihrem bevorzugten Texteditor, um Ihren JavaScript-Code zum Scraping von Walmart Sponsored Ads-Daten hinzuzufügen.
Crawlen der HTML-Seite mit gesponserten Anzeigen von Walmart
Nachdem Sie nun Ihre API-Anmeldeinformationen haben, die Crawlbase Node.js-Bibliothek installiert und die Datei „walmart-scraper.js“ erstellt haben, wählen wir aus, welche Walmart-Seite gescrapt werden soll. Wir werden uns die Walmart-Suchergebnisseite für „Kopfhörer“ in diesem Beispiel. Achten Sie nur darauf, eine Suchseite mit vielen gesponserten Anzeigen auszuwählen. Dies zeigt, wie flexibel und nützlich der Scraping-Prozess sein kann.
So starten Sie die Nutzung von Crawlbase Crawling API, stellen Sie sicher, dass Sie die erforderlichen Details wie Parameter und Endpunkte eingerichtet haben. Überprüfen Sie zunächst, ob Sie die Datei „walmart-scraper.js“ erstellt haben, indem Sie die zuvor genannten Schritte ausgeführt haben. Sobald Ihre Datei einsatzbereit ist, kopieren Sie das unten angegebene Skript und fügen Sie es ein.
Nachdem Sie das Skript hinzugefügt haben, können Sie es in Ihrem Terminal ausführen. Geben Sie einfach node walmart-scraper.js und drücken Sie die Eingabetaste. Dieser Befehl führt das Skript aus und beginnt mit dem Scraping des HTML der Walmart-Suchergebnisseite.
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18
// Importieren Sie die Crawling API const { CrawlingAPI } = erfordern(„Crawlbase“);
// Legen Sie Ihr Crawlbase-Token fest const API = neuCrawlingAPI({ Zeichen: 'IHR_CRAWLBASE_TOKEN' });
// URL der zu scrapenden Walmart-Seite const walmartPageURL = „https://www.walmart.com/search?q=headphones“;
// Anfrage zum Crawlen der URL erhalten Bienen .bekommen(Walmart-Seiten-URL) .dann((Antwort) => { if (Antwort.Statuscode === 200) { trösten.Log(Antwort.Körper); } }) .Fang((Fehler) =>trösten.Fehler);
Das obige Skript führt Sie durch die Verwendung von Crawlbase's Crawling API um Informationen von einer Walmart-Kopfhörer-Suchergebnisseite abzurufen. Dazu gehören Schritte wie das Abrufen des API-Tokens, das Angeben des Weblinks, von dem Sie Informationen erhalten möchten, und das Starten des Vorgangs mit einer GET-Anfrage. Wenn Sie diesen Code ausführen, ist das Ergebnis, das Sie in der Konsole sehen, der grundlegende HTML-Inhalt der ausgewählten Walmart-Suchergebnisseite.
HTML-Antwort:
Extrahieren aussagekräftiger Informationen aus HTML
Im vorherigen Beispiel haben wir untersucht, wie wir die Grundstruktur der Suchergebnisseite für Walmart-Kopfhörer erhalten, die im Wesentlichen der HTML-Code der Webseite ist. Es gibt jedoch Fälle, in denen wir diese Rohdaten nicht benötigen. Stattdessen möchten wir nur die wichtigen Informationen von der Seite. Glücklicherweise gibt es die Crawlbase Crawling API verfügt über spezielle Parameter, um diese wichtigen Inhalte von Walmart-Seiten zu scrapen.
Um dies zu erreichen, müssen Sie ein Parameter „autoparse“ bei Verwendung der Crawling API. Dieser Parameter wurde speziell dafür entwickelt, Ihnen dabei zu helfen, die wesentlichen Elemente der Seite in einem JSON-Format herauszuziehen. Dazu können Sie Änderungen an derselben Datei, „walmart-scraper.js“, vornehmen. Sehen wir uns das folgende Beispiel an, um eine klarere Vorstellung zu bekommen.
// Importieren Sie die Crawling API const { CrawlingAPI } = erfordern(„Crawlbase“);
// Legen Sie Ihr Crawlbase-Token fest const API = neuCrawlingAPI({ Zeichen: 'IHR_CRAWLBASE_TOKEN' });
// URL der zu scrapenden Walmart-Seite const walmartPageURL = „https://www.walmart.com/search?q=headphones“;
// Optionen für Crawling API const Optionen = { automatische Analyse: "wahr", };
// Anfrage zum Crawlen der URL erhalten Bienen .bekommen(walmartPageURL, Optionen) .dann((Antwort) => { if (Antwort.Statuscode === 200) { // Analysieren Sie die JSON-Antwort und drucken Sie sie aus trösten.Log(JSON.parsen(Antwort.Körper)); } }) .Fang((Fehler) => { trösten.Fehler(„API-Anforderungsfehler:“, Fehler); });
{ "ursprünglicher*Status":200, "pc_status":200, "URL":„https://www.walmart.com/search?q=headphones“, "Karosserie":{ "Alarm":„Ein allgemeiner Web Scraper wurde ausgewählt. Bitte wenden Sie sich an den Support, wenn Sie einen detaillierteren Scraper für Ihre angegebene URL benötigen.“, „Titel“:"Kopfhörer - Walmart.com", "Favicon":"", "Meta":{ „Beschreibung“:"Kopfhörer - Walmart.com", "Keywords":"" }, "Inhalt":"22354.6 von 5 Sternen. 2235 Bewertungen 20624.2 von 5 Sternen. 2062 Bewertungen Ladenpreis Marke Geschwindigkeit 39984.3 von 5 Sternen. 3998 Bewertungen Sparen Sie mit 22354.6 von 5 Sternen. 2235 Bewertungen Sparen Sie mit Gratisversand, Lieferung in 3+ Tagen Optionen von 31.99 $ – 35.99 $ Kabelgebundene Over-Ear-Kopfhörer von OneOdio mit Mikrofon | Ohrmuscheln mit Geräuschunterdrückung und Studio-DJ-Kopfhörer mit zwei Anschlüssen für Computer – Schwarz 19504.8 von 5 Sternen. 1950 Bewertungen Sparen Sie mit Versand, Lieferung in 2 Tagen War 39.99 $ Kabelgebundene Over-Ear-Kopfhörer von OneOdio mit Mikrofon, zwei Steckern und tiefem Bass für PC, Laptop, Telefone – Rot 5634.8 von 5 Sternen. 563 Bewertungen Sparen Sie mit Gratisversand, Lieferung in 2 Tagen Optionen ab 11.99 $ – 16.99 $ Mpow Kinderkopfhörer mit Mikrofon, faltbar, 85/94 dB Lautstärkebegrenzung, 3D-Stereo, verstellbarer Kopfbügel, weiche Ohrmuscheln, Over-Ear-Kopfhörer für Kinder, Share-Funktion, kabelgebundene Kinderkopfhörer fürs Schul-Tablet 2584.7 von 5 Sternen. 258 Bewertungen Sparen Sie mit JLab Audio JBuddies Studio On-Ear-Kinderkopfhörer zum Zusammenklappen mit Mikrofon, Lautstärkesafe, Grau und Blau HJKSTUDIORGRYBLU6 13144.4 von 5 Sternen. 1314 Bewertungen Sparen Sie mit Abholung möglich 13424.3 von 5 Sternen. 1342 Bewertungen Sparen mit Abholung möglich Versand, Lieferung in 3+ Tagen Optionen von 15.99 $ – 16.99 $ Kabellose Ohrhörer, Bluetooth 5.0-Kopfhörer IPX8 wasserdicht, Hi-Fi-Stereo-Klangqualität im Ohr, eingebautes Mikrofon, LED-Ladeetui und 21 Stunden Spielzeit, für Smartphones, Laptops, Laufen, Fitnessstudio 22734.2 von 5 Sternen. 2273 Bewertungen Sparen mit 39984.3 von 5 Sternen. 3998 Bewertungen Sparen mit Ähnliche Suchen", "kanonisch":"", "Bilder":[ "//i5.walmartimages.com/dfw/63fd9f59-b3e1/7a569e53-f29a-4c3d-bfaf-6f7a158bfadd/v1/walmartLogo.svg", "//i5.walmartimages.com/dfw/63fd9f59-ac39/29c6759d-7f14-49fa-bd3a-b870eb4fb8fb/v1/wplus-icon-blue.svg", "https://i5.walmartimages.com/dfwrs/76316474-3850/k2-_c6d4aec7-b4a7-4ea4-9223-07c8daef4fcf.v1.png", "https://i5.walmartimages.com/dfw/9fa19e5c-b5/k2-_a1023be2-d16f-44fa-8f0f-c6c9c7ac10e6.v1.png?odnHeight=90&odnWidth=150&odnBg=FFFFFF", "https://i5.walmartimages.com/seo/Bose-QuietComfort-45-Headphones-Noise-Cancelling-Over-Ear-Wireless-Bluetooth-Earphones-Black_48e15895-cb0c-4a8a-b852-4c52dca7692a.5f403bdd71947a437bd6c8bafbb6b8d4.jpeg?odnHeight=150&odnWidth=150&odnBg=FFFFFF", "https://i5.walmartimages.com/seo/Bose-Noise-Cancelling-Headphones-700-over-ear-Wireless-Bluetooth-Earphones-Black_136c356e-a18d-4aa7-bbec-515b2802082a.2f7333d860a9e8bf4c403ce55e49414c.jpeg?odnHeight=150&odnWidth=150&odnBg=FFFFFF", "https://i5.walmartimages.com/seo/VILINICE-Noise-Cancelling-Headphones-Wireless-Bluetooth-Over-Ear-Headphones-with-Microphone-Black-Q8_0cd6ae5a-8ea9-4e46-8b5e-fffb7da5e6f5.d4808578fda9397ec198b2d5dec46404.jpeg?odnHeight=784&odnWidth=580&odnBg=FFFFFF", "https://i5.walmartimages.com/seo/Bose-QuietComfort-45-Headphones-Noise-Cancelling-Over-Ear-Wireless-Bluetooth-Earphones-Black_48e15895-cb0c-4a8a-b852-4c52dca7692a.5f403bdd71947a437bd6c8bafbb6b8d4.jpeg?odnHeight=784&odnWidth=580&odnBg=FFFFFF", "https://i5.walmartimages.com/seo/OneOdio-Wired-Over-Ear-Headphones-with-Mic-Noise-Cancelling-Earcups-Studio-DJ-Headphones-with-Dual-Ports-for-Computer-Black_c13f91b6-ba42-4546-8b06-0830d3344826.3edeff9f7ccba89981515bb979dea386.jpeg?odnHeight=784&odnWidth=580&odnBg=FFFFFF", "https://i5.walmartimages.com/seo/OneOdio-Wired-over-Ear-Headphones-with-Mic-Dual-Plugs-Deep-Bass-Sound-for-PC-Laptop-Phones-Red_115b65f9-b03e-4593-a0c5-202151b7dc9b.1f3fa720cc8320abf4871411fe6916e6.jpeg?odnHeight=784&odnWidth=580&odnBg=FFFFFF", "https://i5.walmartimages.com/seo/Mpow-Kids-Headphones-Microphone-Foldable-85-94dB-Volume-Limit-3D-Stereo-Adjustable-Headband-Soft-Earcups-Ear-Kids-Share-Function-Wired-School-Tablet_4272d222-af66-48b2-9c91-f6df41d7e657.653881036ddc688395cbf4ca0f474d5e.gif?odnHeight=784&odnWidth=580&odnBg=FFFFFF", "https://i5.walmartimages.com/asr/3381e5c8-b55b-42cc-b78f-323c64ce3047.9cd7fd2516bd6ca3c6d0a3da5834d986.jpeg?odnBg=FFFFFF&odnHeight=30&odnWidth=30", "https://i5.walmartimages.com/asr/7cbd2c20-c09a-449b-a323-8a154e5181e9.52dfbc37c15847a1f2b4579ed0ab9b79.jpeg?odnBg=FFFFFF&odnHeight=30&odnWidth=30", "https://i5.walmartimages.com/asr/98cd319b-0a96-41cb-89b7-7336031a3aad.08d842585156cf11fe7f697bd533402f.jpeg?odnBg=FFFFFF&odnHeight=30&odnWidth=30", "https://i5.walmartimages.com/asr/a6048703-eadb-4f5b-81f9-554979ca8a0a.69851709527ec9a0c40d26b00a2d86dd.jpeg?odnHeight=30&odnWidth=30&odnBg=FFFFFF", "https://i5.walmartimages.com/seo/JLab-Audio-JBuddies-Studio-On-ear-Kids-Folding-Headphones-with-Microphone-Volume-Safe-Gray-Blue-HJKSTUDIORGRYBLU6_ebb97b7a-3512-4dfa-8ca4-df7e3b97de13_1.1254787dc2ca28b7ddb470b5f06667a5.jpeg?odnHeight=784&odnWidth=580&odnBg=FFFFFF", "https://i5.walmartimages.com/asr/e6b637bf-5b7d-4ed3-8f03-f8b9a359eae9.29b93e7be9bb463e51c9a66fca039304.png?odnHeight=30&odnWidth=30&odnBg=FFFFFF", "https://i5.walmartimages.com/asr/8c92c76e-a960-4efc-ad51-fcb9c89b44e0.102c174d9416e33088381411ae684629.png?odnHeight=30&odnWidth=30&odnBg=FFFFFF", "https://i5.walmartimages.com/asr/a088fd41-4f78-437f-ae18-bcf60fac4769.834d0a2a501f90b721ab373a0cbe3bd3.png?odnHeight=30&odnWidth=30&odnBg=FFFFFF", "https://i5.walmartimages.com/seo/onn-Wired-on-Ear-Headphones-Black-New_098585ca-4559-42cb-a21e-0e19ea73ea1a.534b8976456996f2d587afb956762b38.jpeg?odnHeight=784&odnWidth=580&odnBg=FFFFFF", "https://i5.walmartimages.com/asr/dbc9f833-9009-4e70-b9ae-a642796ad6bf.d7249fca19de34133a04ebc4f0e3ebd2.png?odnHeight=30&odnWidth=30&odnBg=FFFFFF", "https://i5.walmartimages.com/asr/d8dfe380-dfbf-474d-a38b-1153dace5d21.70721549e4e32d92786c3bcf0a1b4582.png?odnHeight=30&odnWidth=30&odnBg=FFFFFF", "https://i5.walmartimages.com/asr/754b2e4d-6f4a-437e-afb8-0c82eead22a9.14d10d8c6d6148284f7e56709ffe8077.jpeg?odnHeight=30&odnWidth=30&odnBg=FFFFFF", "https://i5.walmartimages.com/seo/Wireless-Earbuds-Bluetooth-5-0-Headphones-IPX8-Waterproof-Hight-Fidelity-Stereo-Sound-Quality-Ear-Headset-Built-in-Mic-LED-Charging-Case-21-Hours-Pla_017730d9-daca-40cf-96e0-21b61e33c0c5.55e1476d137a8795b33560016427e499.jpeg?odnHeight=784&odnWidth=580&odnBg=FFFFFF", "https://i5.walmartimages.com/asr/017730d9-daca-40cf-96e0-21b61e33c0c5.55e1476d137a8795b33560016427e499.jpeg?odnBg=FFFFFF&odnHeight=30&odnWidth=30", "https://i5.walmartimages.com/asr/b4f59ae7-77ba-4b53-b23f-37f7e82975bd.1331b6c1773468e70657f0ee55a65ba8.jpeg?odnBg=FFFFFF&odnHeight=30&odnWidth=30", "https://i5.walmartimages.com/asr/4dcbe91c-b3e5-436a-8ac9-8f6c8df1e129.0db7b16a45b0e37dcb762ea92d03ebd1.jpeg?odnHeight=30&odnWidth=30&odnBg=FFFFFF", "https://i5.walmartimages.com/asr/c51a9ac3-b08d-4699-85b8-c007b032377e.36b30f8eb2ff68115ae27f63732725a8.jpeg?odnHeight=30&odnWidth=30&odnBg=FFFFFF", "https://i5.walmartimages.com/dfw/4ff9c6c9-492b/k2-_d364fa80-6c6b-4a89-88ea-beaaf53a606e.v1.png?odnHeight=16&odnWidth=16&odnBg=FFFFFF", "//i5.walmartimages.com/dfwrs/76316474-f70e/k2-_67001355-c576-4ca2-989d-260a2673c41a.v1.png", "https://www.walmart.com/akam/13/pixel_5bda523a?a=dD1jYmJiODcxZDVkMTM1ZGMwOThhMGUzMWRmN2U0NzJiZGM2YzBmYjExJmpzPW9mZg==" ], "Videos":[], "gruppierte_bilder":{ "db":["//i5.walmartimages.com/dfw/63fd9f59-b3e1/7a569e53-f29a-4c3d-bfaf-6f7a158bfadd/v1/walmartLogo.svg"], "mr2 f5":[ "//i5.walmartimages.com/dfw/63fd9f59-ac39/29c6759d-7f14-49fa-bd3a-b870eb4fb8fb/v1/wplus-icon-blue.svg" ], "mr2 br-100 v-btm":[ "https://i5.walmartimages.com/dfwrs/76316474-3850/k2-_c6d4aec7-b4a7-4ea4-9223-07c8daef4fcf.v1.png" ], „mw-keine mb2“:[ "https://i5.walmartimages.com/dfw/9fa19e5c-b5/k2-_a1023be2-d16f-44fa-8f0f-c6c9c7ac10e6.v1.png?odnHeight=90&odnWidth=150&odnBg=FFFFFF" ], "mw-keine":[ "https://i5.walmartimages.com/seo/Bose-QuietComfort-45-Headphones-Noise-Cancelling-Over-Ear-Wireless-Bluetooth-Earphones-Black_48e15895-cb0c-4a8a-b852-4c52dca7692a.5f403bdd71947a437bd6c8bafbb6b8d4.jpeg?odnHeight=150&odnWidth=150&odnBg=FFFFFF", "https://i5.walmartimages.com/seo/Bose-Noise-Cancelling-Headphones-700-over-ear-Wireless-Bluetooth-Earphones-Black_136c356e-a18d-4aa7-bbec-515b2802082a.2f7333d860a9e8bf4c403ce55e49414c.jpeg?odnHeight=150&odnWidth=150&odnBg=FFFFFF", "https://i5.walmartimages.com/dfw/4ff9c6c9-492b/k2-_d364fa80-6c6b-4a89-88ea-beaaf53a606e.v1.png?odnHeight=16&odnWidth=16&odnBg=FFFFFF" ], "absolute Top-0, links-0":[ "https://i5.walmartimages.com/seo/VILINICE-Noise-Cancelling-Headphones-Wireless-Bluetooth-Over-Ear-Headphones-with-Microphone-Black-Q8_0cd6ae5a-8ea9-4e46-8b5e-fffb7da5e6f5.d4808578fda9397ec198b2d5dec46404.jpeg?odnHeight=784&odnWidth=580&odnBg=FFFFFF", "https://i5.walmartimages.com/seo/Bose-QuietComfort-45-Headphones-Noise-Cancelling-Over-Ear-Wireless-Bluetooth-Earphones-Black_48e15895-cb0c-4a8a-b852-4c52dca7692a.5f403bdd71947a437bd6c8bafbb6b8d4.jpeg?odnHeight=784&odnWidth=580&odnBg=FFFFFF", "https://i5.walmartimages.com/seo/OneOdio-Wired-Over-Ear-Headphones-with-Mic-Noise-Cancelling-Earcups-Studio-DJ-Headphones-with-Dual-Ports-for-Computer-Black_c13f91b6-ba42-4546-8b06-0830d3344826.3edeff9f7ccba89981515bb979dea386.jpeg?odnHeight=784&odnWidth=580&odnBg=FFFFFF", "https://i5.walmartimages.com/seo/OneOdio-Wired-over-Ear-Headphones-with-Mic-Dual-Plugs-Deep-Bass-Sound-for-PC-Laptop-Phones-Red_115b65f9-b03e-4593-a0c5-202151b7dc9b.1f3fa720cc8320abf4871411fe6916e6.jpeg?odnHeight=784&odnWidth=580&odnBg=FFFFFF", "https://i5.walmartimages.com/seo/Mpow-Kids-Headphones-Microphone-Foldable-85-94dB-Volume-Limit-3D-Stereo-Adjustable-Headband-Soft-Earcups-Ear-Kids-Share-Function-Wired-School-Tablet_4272d222-af66-48b2-9c91-f6df41d7e657.653881036ddc688395cbf4ca0f474d5e.gif?odnHeight=784&odnWidth=580&odnBg=FFFFFF", "https://i5.walmartimages.com/seo/JLab-Audio-JBuddies-Studio-On-ear-Kids-Folding-Headphones-with-Microphone-Volume-Safe-Gray-Blue-HJKSTUDIORGRYBLU6_ebb97b7a-3512-4dfa-8ca4-df7e3b97de13_1.1254787dc2ca28b7ddb470b5f06667a5.jpeg?odnHeight=784&odnWidth=580&odnBg=FFFFFF", "https://i5.walmartimages.com/seo/onn-Wired-on-Ear-Headphones-Black-New_098585ca-4559-42cb-a21e-0e19ea73ea1a.534b8976456996f2d587afb956762b38.jpeg?odnHeight=784&odnWidth=580&odnBg=FFFFFF", "https://i5.walmartimages.com/seo/Wireless-Earbuds-Bluetooth-5-0-Headphones-IPX8-Waterproof-Hight-Fidelity-Stereo-Sound-Quality-Ear-Headset-Built-in-Mic-LED-Charging-Case-21-Hours-Pla_017730d9-daca-40cf-96e0-21b61e33c0c5.55e1476d137a8795b33560016427e499.jpeg?odnHeight=784&odnWidth=580&odnBg=FFFFFF" ], "biegen":["//i5.walmartimages.com/dfw/63fd9f59-ac39/29c6759d-7f14-49fa-bd3a-b870eb4fb8fb/v1/wplus-icon-blue.svg"], "br-100 v-btm ba b--transparent":[ "https://i5.walmartimages.com/asr/3381e5c8-b55b-42cc-b78f-323c64ce3047.9cd7fd2516bd6ca3c6d0a3da5834d986.jpeg?odnBg=FFFFFF&odnHeight=30&odnWidth=30", "https://i5.walmartimages.com/asr/7cbd2c20-c09a-449b-a323-8a154e5181e9.52dfbc37c15847a1f2b4579ed0ab9b79.jpeg?odnBg=FFFFFF&odnHeight=30&odnWidth=30", "https://i5.walmartimages.com/asr/98cd319b-0a96-41cb-89b7-7336031a3aad.08d842585156cf11fe7f697bd533402f.jpeg?odnBg=FFFFFF&odnHeight=30&odnWidth=30", "https://i5.walmartimages.com/asr/a6048703-eadb-4f5b-81f9-554979ca8a0a.69851709527ec9a0c40d26b00a2d86dd.jpeg?odnHeight=30&odnWidth=30&odnBg=FFFFFF", "https://i5.walmartimages.com/asr/e6b637bf-5b7d-4ed3-8f03-f8b9a359eae9.29b93e7be9bb463e51c9a66fca039304.png?odnHeight=30&odnWidth=30&odnBg=FFFFFF", "https://i5.walmartimages.com/asr/8c92c76e-a960-4efc-ad51-fcb9c89b44e0.102c174d9416e33088381411ae684629.png?odnHeight=30&odnWidth=30&odnBg=FFFFFF", "https://i5.walmartimages.com/asr/a088fd41-4f78-437f-ae18-bcf60fac4769.834d0a2a501f90b721ab373a0cbe3bd3.png?odnHeight=30&odnWidth=30&odnBg=FFFFFF", "https://i5.walmartimages.com/asr/dbc9f833-9009-4e70-b9ae-a642796ad6bf.d7249fca19de34133a04ebc4f0e3ebd2.png?odnHeight=30&odnWidth=30&odnBg=FFFFFF", "https://i5.walmartimages.com/asr/d8dfe380-dfbf-474d-a38b-1153dace5d21.70721549e4e32d92786c3bcf0a1b4582.png?odnHeight=30&odnWidth=30&odnBg=FFFFFF", "https://i5.walmartimages.com/asr/754b2e4d-6f4a-437e-afb8-0c82eead22a9.14d10d8c6d6148284f7e56709ffe8077.jpeg?odnHeight=30&odnWidth=30&odnBg=FFFFFF", "https://i5.walmartimages.com/asr/017730d9-daca-40cf-96e0-21b61e33c0c5.55e1476d137a8795b33560016427e499.jpeg?odnBg=FFFFFF&odnHeight=30&odnWidth=30", "https://i5.walmartimages.com/asr/b4f59ae7-77ba-4b53-b23f-37f7e82975bd.1331b6c1773468e70657f0ee55a65ba8.jpeg?odnBg=FFFFFF&odnHeight=30&odnWidth=30", "https://i5.walmartimages.com/asr/4dcbe91c-b3e5-436a-8ac9-8f6c8df1e129.0db7b16a45b0e37dcb762ea92d03ebd1.jpeg?odnHeight=30&odnWidth=30&odnBg=FFFFFF", "https://i5.walmartimages.com/asr/c51a9ac3-b08d-4699-85b8-c007b032377e.36b30f8eb2ff68115ae27f63732725a8.jpeg?odnHeight=30&odnWidth=30&odnBg=FFFFFF" ], "herr1":["//i5.walmartimages.com/dfwrs/76316474-f70e/k2-_67001355-c576-4ca2-989d-260a2673c41a.v1.png"], "keine_Klasse_gefunden":[ "https://www.walmart.com/akam/13/pixel_5bda523a?a=dD1jYmJiODcxZDVkMTM1ZGMwOThhMGUzMWRmN2U0NzJiZGM2YzBmYjExJmpzPW9mZg==" ] }, "og_images":[ "https://i5.walmartimages.com/seo/VILINICE-Noise-Cancelling-Headphones-Wireless-Bluetooth-Over-Ear-Headphones-with-Microphone-Black-Q8_0cd6ae5a-8ea9-4e46-8b5e-fffb7da5e6f5.d4808578fda9397ec198b2d5dec46404.jpeg?odnHeight=180&odnWidth=180&odnBg=FFFFFF" ], "Links":[ „https://www.walmart.com/search?q=headphones#maincontent“, „https://www.walmart.com/all-departments“, „https://www.walmart.com/“, „https://www.walmart.com/my-items“, „https://www.walmart.com/lists“, „https://www.walmart.com/my-registries“, „https://www.walmart.com/account/login?vid=oaoh“, „https://www.walmart.com/orders“, „https://www.walmart.com/plus“, "https://wrd.walmart.com/track?bt=1&eventST=click&plmt=sb-search-top~desktop~&pos=1&tax=3944_133251_1095191_1230614_1230477&rdf=1&rd=https%3A%2F%2Fwww.walmart.com%2Fsearch%3Fq%3Dbose%26adsRedirect%3Dtrue&adUid=5df289f5-f006-403b-939e-25c482ed9e60&mloc=sb-search-top&pltfm=desktop&pgId=headphones&pt=search&spQs=B-0ORuQ6BMVYu5ErviP0wtXxvyXSkHVTZOp1e2rDjcoRq_MNG-D8nZwYzIobP0m5_yiNE5aJP_PLXBduk_CYa4p9PTneu01dzjWaRJ7SPKfKhvpYsvImGaJ2Zu5Cf4w4IuDlkyGfd0FDgUQ5GgOzYh_f6YuQzvl7abAVDMeVUmAwpChqoG563UdmA1A2NHTJcuxVjbLySLz2LWXuLEMcqg&storeId=1508&bkt=2482&addlInfo=~sbaItems%7C376188834%7C932544113~", "https://wrd.walmart.com/track?bt=1&eventST=click&plmt=sb-search-top~desktop~&pos=2&tax=3944_133251_1095191_1230614_1230477&rdf=1&rd=https%3A%2F%2Fwww.walmart.com%2Fip%2FBose-QuietComfort-45-Headphones-Noise-Cancelling-Over-Ear-Wireless-Bluetooth-Earphones-Black%2F376188834%3FadsRedirect%3Dtrue&adUid=5df289f5-f006-403b-939e-25c482ed9e60&mloc=sb-search-top&pltfm=desktop&pgId=headphones&pt=search&spQs=m_0JyukHj9idXYjE3UJg90uFCO0g0V1jfID0Et9RKbOsSZ1bT7OkNFOcOuNYfwRZqOxiu2Ywg-IikpJTjRvHUmwt-UiDSwR25WxqpFDqMSDf1DSAFiDe8y_nm-vkLA-rBMY1NTIwA1AGa8DZwQPTNdo66B12BugtA8gyWCMGWeU-55AY9P5XbDlvIhJg5HqxwVqAOAAyRKmxBI_U3Ov-ew&storeId=1508&couponState=na&bkt=2482&/ip/Bose-QuietComfort-45-Headphones-Noise-Cancelling-Over-Ear-Wireless-Bluetooth-Earphones-Black/376188834", "https://wrd.walmart.com/track?bt=1&eventST=click&plmt=sb-search-top~desktop~&pos=3&tax=3944_133251_1095191_1230614_1230477&rdf=1&rd=https%3A%2F%2Fwww.walmart.com%2Fip%2FBose-Noise-Cancelling-Headphones-700-over-ear-Wireless-Bluetooth-Earphones-Black%2F932544113%3FadsRedirect%3Dtrue&adUid=5df289f5-f006-403b-939e-25c482ed9e60&mloc=sb-search-top&pltfm=desktop&pgId=headphones&pt=search&spQs=*-AvGiXn44R9Lv4lomZqtEuFCO0g0V1jfID0Et9RKbOsSZ1bT7OkNFOcOuNYfwRZqOxiu2Ywg-IikpJTjRvHUmwt-UiDSwR25WxqpFDqMSDf1DSAFiDe8y_nm-vkLA-rBMY1NTIwA1AGa8DZwQPTNdo66B12BugtA8gyWCMGWeU-55AY9P5XbDlvIhJg5HqxwVqAOAAyRKmxBI_U3Ov-ew&storeId=1508&couponState=na&bkt=2482&/ip/Bose-Noise-Cancelling-Headphones-700-over-ear-Wireless-Bluetooth-Earphones-Black/932544113", „https://www.walmart.com/shop/deals/electronics/headphones-speakers-and-video“, "https://www.walmart.com/browse/electronics/shop-all-headphones-by-type/3944_133251_1095191_1230614_4480?max_price=25&povid=ETS_Holiday_TAVC_nav_headphones_U25", "https://www.walmart.com/browse/electronics/shop-all-headphones-by-type/3944_133251_1095191_1230614_4480", "https://www.walmart.com/browse/electronics/apple-airpods/3944_133251_1095191_1231498_2452446", "https://www.walmart.com/browse/electronics/wireless-bluetooth-headphones/3944_133251_1095191_1230614_1230478", "https://www.walmart.com/browse/electronics/earbuds-in-ear-headphones/3944_133251_1095191_1230614_1230476", "https://www.walmart.com/browse/electronics/over-ear-on-ear-headphones/3944_133251_1095191_1230614_1230477", "https://www.walmart.com/browse/electronics/pc-gaming-headsets/3944_1089430_7052607_9433123_6790712", "https://www.walmart.com/browse/electronics/noise-cancelling-headphones/3944_133251_1095191_1230614_6051360", "https://www.walmart.com/browse/electronics/kids-headphones/3944_133251_1095191_1230614_1230480", "https://www.walmart.com/browse/electronics/sports-headphones/3944_133251_1095191_1230614_1231506", "https://www.walmart.com/browse/electronics/bone-conduction-headphones/3944_133251_1095191_1230614_4061824", "https://www.walmart.com/browse/electronics/true-wireless-headphones/3944_133251_1095191_1230614_8443225", "https://www.walmart.com/browse/electronics/waterproof-headphones/3944_133251_1095191_1230614_8436721", "https://wrd.walmart.com/track?bt=1&eventST=click&plmt=sp-search-middle~desktop~&pos=1&tax=3944_133251_1095191_1230614_1230477&rdf=1&rd=https%3A%2F%2Fwww.walmart.com%2Fip%2FVILINICE-Noise-Cancelling-Headphones-Wireless-Bluetooth-Over-Ear-Headphones-with-Microphone-Black-Q8%2F249420079%3Fathbdg%3DL1700%26adsRedirect%3Dtrue&adUid=5ca17ddb-5baf-436d-aba9-981903ec56fd&mloc=sp-search-middle&pltfm=desktop&pgId=headphones&pt=search&spQs=Q4PuPJiKTU0VgiILg4CCfmjYTVN_lI6VtLWozH0Iop2XJhVMOXyG7gISmZLPbmpGpEdtlfvKiY1G7WNHmRvvh6wJ9Tnw_77bUsdhYxKt1ka9rvxERUOLmosiXInaBp2QMQDiWKZOIqSNp8HSy1Y9EO2CLCh2-iDL0oHGt6jNTuHUbNQcqqoGglTuMh92vLyXZOVKVN7iZqSiPWzY2i5thOqeUkuzemiGjAkJEVPvpWU&storeId=1508&couponState=na&bkt=ace_3121%7Ccoldstart_off%7Csearch_default_tail_l1_disable_pop_boost&athbdg=L1700", "https://wrd.walmart.com/track?bt=1&eventST=click&plmt=sp-search-middle~desktop~&pos=2&tax=3944_133251_1095191_1230614_1230477&rdf=1&rd=https%3A%2F%2Fwww.walmart.com%2Fip%2FBose-QuietComfort-45-Headphones-Noise-Cancelling-Over-Ear-Wireless-Bluetooth-Earphones-Black%2F376188834%3FadsRedirect%3Dtrue&adUid=5ca17ddb-5baf-436d-aba9-981903ec56fd&mloc=sp-search-middle&pltfm=desktop&pgId=headphones&pt=search&spQs=m_0JyukHj9idXYjE3UJg9zo21dErVbhfiNbjoM57ZCirOGaUNYFsDwTBc61YjFkkaHFRuLWpvz-0TRcaCX3xSTcwDnT_L0XfvyDTidG7UWCUNOTqcrUO0ceIpsonLt8NKmePQqCNgWHfEEnrtrs3Li5j1SjjNfuy7G1adbYCkzNbTJC01EpGw-nmu3i7Ep6wkWp_6oFq82PTlPU2rak16G7PsNtvbRQ5MfQ0hp5k7Gs&storeId=1508&couponState=na&bkt=ace_3121%7Ccoldstart_off%7Csearch_default_tail_l1_disable_pop_boost&/ip/Bose-QuietComfort-45-Headphones-Noise-Cancelling-Over-Ear-Wireless-Bluetooth-Earphones-Black/376188834", "https://wrd.walmart.com/track?bt=1&eventST=click&plmt=sp-search-middle~desktop~&pos=3&tax=3944_133251_1095191_1230614_1230477&rdf=1&rd=https%3A%2F%2Fwww.walmart.com%2Fip%2FOneOdio-Wired-Over-Ear-Headphones-with-Mic-Noise-Cancelling-Earcups-Studio-DJ-Headphones-with-Dual-Ports-for-Computer-Black%2F950096760%3FadsRedirect%3Dtrue&adUid=5ca17ddb-5baf-436d-aba9-981903ec56fd&mloc=sp-search-middle&pltfm=desktop&pgId=headphones&pt=search&spQs=DfNEa7riVHRvPYwE7fB4yzDE4sFRdGlQfdI4D96J5iG0QVqxYCgvTBW0p_hlRv4BALEjQEAkdxu0YbLayUdGOoK-e4DxZzkTGV92xzubg1EQSyBbgfAkkffimBm_fkdcYAQlTOfkoAQQQEdDx2SEmxwhYGhpSLysRW6KsahKewHMxvq8Zau7QFlNxlBK-eeDOeIrvN5JbwLUzni13-4ZjuiMM8dvAuZe_c3nKyfG8eSfPmenhYOoknNnkqL5C5xjF3kwdWoY2rMgNk8hprU3Wg&storeId=1508&couponState=na&bkt=ace_3121%7Ccoldstart_off%7Csearch_default_tail_l1_disable_pop_boost&/ip/OneOdio-Wired-Over-Ear-Headphones-with-Mic-Noise-Cancelling-Earcups-Studio-DJ-Headphones-with-Dual-Ports-for-Computer-Black/950096760", "https://wrd.walmart.com/track?bt=1&eventST=click&plmt=sp-search-middle~desktop~&pos=4&tax=3944_133251_1095191_1230614_1230477&rdf=1&rd=https%3A%2F%2Fwww.walmart.com%2Fip%2FOneOdio-Wired-over-Ear-Headphones-with-Mic-Dual-Plugs-Deep-Bass-Sound-for-PC-Laptop-Phones-Red%2F970124388%3FadsRedirect%3Dtrue&adUid=5ca17ddb-5baf-436d-aba9-981903ec56fd&mloc=sp-search-middle&pltfm=desktop&pgId=headphones&pt=search&spQs=i_1k1IU1TnzEFRm0OorvmfVvGl2FlnToXCnQyCesMhXKkuwxjim5P77Fr_2x3eaG3qtHU_UhjGOq6fPayBPrpWiNIz0v09b2KXJMleLMy7GmZqcFLyAgYnJCS8E9xZlimoLki0mMRWzJ8hbAnskFWJkRCx3045ljZXr-_R3IN1bENFCZe4YjcfM9I3H8R0HkVou3_w1O7zcNkYR_bljlY5J3mITg_xivqsJYeFpsNJI&storeId=1508&couponState=na&bkt=ace_3121%7Ccoldstart_off%7Csearch_default_tail_l1_disable_pop_boost&/ip/OneOdio-Wired-over-Ear-Headphones-with-Mic-Dual-Plugs-Deep-Bass-Sound-for-PC-Laptop-Phones-Red/970124388", "https://www.walmart.com/ip/Mpow-Kids-Headphones-Microphone-Foldable-85-94dB-Volume-Limit-3D-Stereo-Adjustable-Headband-Soft-Earcups-Ear-Kids-Share-Function-Wired-School-Tablet/729302622?athbdg=L1600&from=/search", "https://www.walmart.com/ip/Mpow-Kids-Headphones-Microphone-Foldable-85-94dB-Volume-Limit-3D-Stereo-Adjustable-Headband-Soft-Earcups-Ear-Kids-Share-Function-Wired-School-Tablet/729302622?athbdg=L1600", "https://www.walmart.com/ip/MPOW-Kids-Headphones-Microphone-Stereo-Wired-85-94dB-Volume-Limit-Adjustable-Foldable-Children-Headphone-Share-Port-Ear-Headsets-School -Tablet-Airpla/573000754?variantFieldId=actual_color", "https://www.walmart.com/ip/Mpow-Kids-Headphones-School-Boys-Girls-Microphone-Safe-Volume-85-94dB-Foldable-Adjustable-Ear-Toddler-Earphones-Computer-Chromebook-Tablets -Sharing-J/723940737?variantFieldId=actual_color", "https://www.walmart.com/ip/MPOW-Kids-Headphones-Microphone-85-94dB-Volume-Limit-Hi-Fi-Stereo-Wired-Ear-Kids-Adjustable-Headband-Soft-Earcups-Audio -Share-Tangle-Free-Airplane/877864066?variantFieldId=actual_color", "https://www.walmart.com/ip/Mpow-Kids-Headphones-Microphone-Foldable-85-94dB-Volume-Limit-3D-Stereo-Adjustable-Headband-Soft-Earcups-Ear-Kids-Share-Function -Wired-School-Tablet/729302622?variantFieldId=actual_color", "https://www.walmart.com/ip/JLab-Audio-JBuddies-Studio-On-ear-Kids-Folding-Headphones-with-Microphone-Volume-Safe-Gray-Blue-HJKSTUDIORGRYBLU6/577015197?athbdg=L1600&from =/suchen", "https://www.walmart.com/ip/JLab-Audio-JBuddies-Studio-On-ear-Kids-Folding-Headphones-with-Microphone-Volume-Safe-Gray-Blue-HJKSTUDIORGRYBLU6/577015197?athbdg=L1600 ", "https://www.walmart.com/ip/JLab-Audio-JBuddies-Studio-Children-s-On-Ear-Headphones-Over-Ear-Headphones-Foldable-Graphite-Purple-JKSTUDIO-GRYPRPL-BOX/724645445 ?variantFieldId=actual_color", "https://www.walmart.com/ip/JLab-Audio-JBuddies-Studio-On-ear-Kids-Folding-Headphones-with-Microphone-Volume-Safe-Gray-Blue-HJKSTUDIORGRYBLU6/577015197?variantFieldId=actual_color ", „https://www.walmart.com/ip/JLab-Audio-JBuddies-Studio-On-ear-Kids-Headphones-with-Microphone-Pink/1947609799?variantFieldId=actual_color“, „https://www.walmart.com/ip/onn-Wired-on-Ear-Headphones-Black-New/948821441?from=/search“, „https://www.walmart.com/ip/onn-Wired-on-Ear-Headphones-Black-New/948821441“, „https://www.walmart.com/ip/onn-Wired-on-Ear-Headphones-Black-New/948821441?variantFieldId=actual_color“, „https://www.walmart.com/ip/onn-Wired-On-ear-Headphones-Blue-New/803189432?variantFieldId=actual_color“, „https://www.walmart.com/ip/onn-On-ear-Wired-Headphones-Pink-New/624074651?variantFieldId=actual_color“, "https://www.walmart.com/ip/Wireless-Earbuds-Bluetooth-5-0-Headphones-IPX8-Waterproof-Hight-Fidelity-Stereo-Sound-Quality-Ear-Headset-Built-in-Mic-LED-Charging-Case-21-Hours-Pla/806859415?athbdg=L1800&from=/search", "https://www.walmart.com/ip/Wireless-Earbuds-Bluetooth-5-0-Headphones-IPX8-Waterproof-Hight-Fidelity-Stereo-Sound-Quality-Ear-Headset-Built-in-Mic-LED-Charging-Case-21-Hours-Pla/806859415?athbdg=L1800", "https://www.walmart.com/ip/Wireless-Earbuds-Bluetooth-5-0-Headphones-IPX8-Waterproof-Hight-Fidelity-Stereo-Sound-Quality-Ear-Headset-Built-in-Mic-LED-Charging-Case-21-Hours-Pla/806859415?variantFieldId=actual_color", "https://www.walmart.com/ip/Wireless-Earbuds-Bluetooth-Headphones-5-3-HiFi-Stereo-Earphones-4H-Playtime-Earbud-Earbud-Touch-Control-IPX4-Waterproof-Earphones-Sport-Headset-Andro/5039164278?variantFieldId=actual_color", „https://www.walmart.com/ip/VILINICE-Noise-Cancelling-Headphones-Wireless-Bluetooth-Over-Ear-Headphones-with-Microphone-Black-Q8/249420079?athbdg=L1700&from=/search“, „https://www.walmart.com/ip/VILINICE-Noise-Cancelling-Headphones-Wireless-Bluetooth-Over-Ear-Headphones-with-Microphone-Black-Q8/249420079?athbdg=L1700“, „https://www.walmart.com/ip/VILINICE-Noise-Cancelling-Headphones-Wireless-Bluetooth-Over-Ear-Headphones-with-Microphone-Black-Q8/249420079?variantFieldId=actual_color“, "https://www.walmart.com/ip/VILINICE-Wireless-Bluetooth-Over-The-Ear-Headphones-with-Microphone-Active-Noise-Cancelling-Headphones-for-Travel-Sport/3737184614?variantFieldId=actual_color ", „https://www.walmart.com/store/directory“, „https://careers.walmart.com/“, „https://corporate.walmart.com/“, „https://marketplace.walmart.com/?utm_source=Walmart.com&utm_medium=link&utm_campaign=footer“, „https://www.walmart.com/help“, „https://www.walmart.com/cp/flu-shots-immunizations/1228302“, „https://corporate.walmart.com/recalls“, "https://www.walmart.com/help/article/responsible-disclosure-and-accessibility-policies/0f173dab8bd942da84b1cd7ab5ffc3cb", „https://www.walmart.com/taxexempt/“, "https://walmart.onelink.me/UIev?pid=walmart.com&af_web_dp=https%3A%2F%2Fwww.walmart.com%2Fcp%2Fwalmart-mobile-app%2F1087865&c=Walmart.com%20Site%20Footer&af_dp=walmart%3A%2F%2F", „http://msds.walmartstores.com/“, "https://www.walmart.com/help/article/walmart-com-terms-of-use/3b75080af40340d6bbd596f116fae5a0", „https://corporate.walmart.com/privacy-security“, „https://corporate.walmart.com/california-transparency“, „https://www.walmart.com/account/api/ccpa-intake?native=false&app=gm&type=sod“, „https://corporate.walmart.com/privacy-security/california-privacy-rights#what-are-the-categories-of-personal-information-collected“, „https://www.walmart.com/account/api/ccpa-intake?native=false&app=gm&type=access“, „https://www.walmart.com/brand/branddirectory“, „https://www.walmart.com/cp/walmart-in-the-know/7781927“ ] } }
Extrahieren von Daten zu gesponserten Anzeigen von Walmart
In diesem Beispiel zeigen wir Ihnen, wie Sie Walmart-PPC-Anzeigendaten aus dem HTML-Inhalt einer Walmart-Kopfhörer-Suchergebnisseite abrufen, die Sie zuvor gescrapt haben. Dazu müssen zwei JavaScript-Bibliotheken verwendet werden: Cheerio, das häufig für Web Scraping verwendet wird, und fs, das oft für die Arbeit mit dem Dateisystem verwendet wird.
Der folgende JavaScript-Code zeigt, wie Sie mithilfe der Cheerio-Bibliothek Produktdetails von einer Walmart-Bestsellerseite sammeln. Er liest den HTML-Inhalt aus einer „walmart-scraper.js“-Datei, lädt ihn in Cheerio und extrahiert Informationen wie Produktname, Preis, Bewertung, Rezensionen und Bild-URL. Das Skript durchläuft jeden Produktcontainer und speichert die Daten in einem JSON-Array.
// Den HTML-Inhalt aus der Datei laden const htmlContent = fs.lesenFileSync('walmart-scraper.html', 'utf8');
// HTML-Inhalt in Cheerio laden const $ = Prost.Belastung(html-Inhalt);
// Alle Produktcontainer auswählen (vorausgesetzt, sie haben die gleiche Klasse) const ProduktContainer = $(„.sans-serif.mid-gray.relative.flex.flex-column.w-100.hide-child-opacity“);
// Array zum Speichern von Informationen für alle Produkte const Produkte = [];
// Durchlaufe jeden Produktcontainer ProduktContainer.jeder((Index, Element) => { // Produktinformationen für jedes Produkt extrahieren const Produkt = {};
// Produktpreis und Währungssymbol extrahieren const ProduktPreisContainer = $(Element).gefunden(„[data-automation-id="Produktpreis"]“);
// Den gesamten Preisstring extrahieren const PreisString = ProduktPreisContainer.gefunden(„.w_iUH7“).Text().trimmen();
//Verwenden Sie einen regulären Ausdruck, um Währungssymbol und numerischen Teil zu trennen const Preisübereinstimmung = Preiszeichenfolge.Spiel(/([^\d]+)([\d,\.]+)/);
if (Preisvergleich) { // Währungssymbol und numerischen Teil in einem Schlüssel zusammenfassen: Preis // Den spezifischen Text „[Jetzt]“ aus dem Preiswert entfernen Produkt.Preis = `${Preisübereinstimmung[1].trimmen()}${Preisübereinstimmung[2]}`; } sonst { // Standardwert, wenn keine Übereinstimmung vorliegt Produkt.Preis = ''; }
// Extrahiere nur die Bewertung ohne die Anzahl der Bewertungen und den Bewertungstext const Bewertung ohne Bewertungen = Bewertungstext.ersetzen(/\d+\s*Bewertungen/i, '').trimmen(); Produkt.Wertung = BewertungOhneBewertungen !== '' ? BewertungOhneBewertungen: „Bewertung nicht verfügbar“;
// Extrahiere nur den numerischen Teil der Bewertungen const BewertungenMatch = Bewertungstext.Spiel(/(\d+)\s*Bewertungen/i); Produkt.Rezensionen = BewertungenMatch? parseInt(BewertungenMatch[1], 10): 0;
[ { "Produkttyp":"Gesponsert", "Name":"Bose QuietComfort 45 Kopfhörer, Over-Ear-Kopfhörer mit Geräuschunterdrückung, kabellose Bluetooth-Kopfhörer, Schwarz", "Preis":"aktueller Preis 329.00 $", "Bewertung":„4.6 von 5 Sternen.“, "Bewertungen":2238, "Bild":"https://i5.walmartimages.com/seo/Bose-QuietComfort-45-Headphones-Noise-Cancelling-Over-Ear-Wireless-Bluetooth-Earphones-Black_48e15895-cb0c-4a8a-b852-4c52dca7692a.5f403bdd71947a437bd6c8bafbb6b8d4.jpeg?odnHeight=784&odnWidth=580&odnBg=FFFFFF" }, { "Produkttyp":"Gesponsert", "Name":"COWIN E7 Kopfhörer mit aktiver Geräuschunterdrückung, Bluetooth-Kopfhörer mit Mikrofon, tiefe Bässe, kabellose Over-Ear-Kopfhörer (schwarz)", "Preis":"aktueller Preis 35.00 $", "Bewertung":„4.5 von 5 Sternen.“, "Bewertungen":1150, "Bild":"https://i5.walmartimages.com/seo/COWIN-E7-Active-Noise-Cancelling-Headphones-Bluetooth-Headphones-with-Mic-Deep-Bass-Wireless-Headphones-Over-Ear-Black_fc54e2c8-1164-4582-b0dc-1ed7dfe25a3b_1.ce7aa4a80aca56b2d1e59adfbc3ba438.jpeg?odnHeight=784&odnWidth=580&odnBg=FFFFFF" }, { "Produkttyp":"Gesponsert", "Name":„Kabelgebundene Over-Ear-Kopfhörer mit Mikrofon von OneOdio | Ohrmuscheln mit Geräuschunterdrückung und Studio-DJ-Kopfhörer mit zwei Anschlüssen für den Computer – Schwarz“, "Preis":"aktueller Preis 31.99 $", "Bewertung":„4.8 von 5 Sternen.“, "Bewertungen":1952, "Bild":"https://i5.walmartimages.com/seo/OneOdio-Wired-Over-Ear-Headphones-with-Mic-Noise-Cancelling-Earcups-Studio-DJ-Headphones-with-Dual-Ports-for-Computer-Black_c13f91b6-ba42-4546-8b06-0830d3344826.3edeff9f7ccba89981515bb979dea386.jpeg?odnHeight=784&odnWidth=580&odnBg=FFFFFF" }, { "Produkttyp":"Gesponsert", "Name":"Philips H4205 On-Ear-Kopfhörer mit 32-mm-Treibern und BASS Boost on Demand, Schwarz", "Preis":"aktueller Preis 19.88 $", "Bewertung":„4.3 von 5 Sternen.“, "Bewertungen":23, "Bild":"https://i5.walmartimages.com/seo/Philips-H4205-on-Ear-Wireless-Headphones-with-32mm-Drivers-and-BASS-Boost-on-Demand-Black_b6de6dc8-4e04-48bb-97e0-a98444c39cc0.d274ce7ea7d072b4f4cf1cbb3c610a01.jpeg?odnHeight=784&odnWidth=580&odnBg=FFFFFF" } ]
Gewährleistung der Datengenauigkeit
Es ist äußerst wichtig, sicherzustellen, dass die Informationen, die Sie von Walmart-gesponserten Anzeigen erhalten, korrekt sind. Hier sprechen wir über die besten Möglichkeiten, um sicherzustellen, dass die Daten korrekt sind, und einige Tricks zur doppelten Überprüfung.
Best Practices für eine zuverlässige Extraktion
Regelmäßige Datenvalidierung: Führen Sie regelmäßige Validierungsprüfungen durch, um sicherzustellen, dass die extrahierten Daten den erwarteten Mustern entsprechen. Dazu gehört die Überprüfung von Produktdetails, Preisen und anderen relevanten Informationen anhand vordefinierter Kriterien.
Robuste Fehlerbehandlung: Entwickeln Sie robuste Fehlerbehandlungsmechanismen, um Probleme zu beheben, die während des Extraktionsprozesses auftreten können. Dazu gehört die ordnungsgemäße Behandlung von Netzwerkfehlern, Timeouts und Änderungen in der Website-Struktur, um Datenungenauigkeiten zu vermeiden.
Einhaltung der Servicebedingungen: Halten Sie sich an die Servicebedingungen und Richtlinien von Walmart für Datenextraktion. Stellen Sie sicher, dass Ihre Extraktionsmethoden den Richtlinien der Plattform entsprechen, um rechtliche Komplikationen und Störungen Ihrer Datenabrufprozesse zu vermeiden.
Benutzer-Agent-Rotation: Wechseln Sie beim Web Scraping die Benutzeragenten, um menschliches Surfverhalten nachzuahmen. Dies hilft, eine Erkennung und mögliche Blockierungen durch Walmarts Sicherheitsmechanismen zu vermeiden und trägt zu einer zuverlässigeren Datenextraktion bei.
Drosselung von Anfragen: Implementieren Sie eine Anforderungsdrosselung, um die Datenextraktionsrate zu steuern. Übermäßige Anforderungen innerhalb eines kurzen Zeitraums können Sicherheitsmaßnahmen auf der Walmart-Plattform auslösen, was zu vorübergehenden oder dauerhaften Einschränkungen führen kann.
Techniken zur Qualitätssicherung
Vergleichende Analyse: Führen Sie vergleichende Analysen zwischen den extrahierten Daten und einer zuverlässigen Referenzquelle durch, beispielsweise manuellen Prüfungen oder offiziellen Produktlisten. Alle dabei festgestellten Unstimmigkeiten sollten untersucht und behoben werden.
Automatisierte Tests: Entwickeln Sie automatisierte Testskripte, um die Genauigkeit der extrahierten Daten zu überprüfen. Diese Skripte können so konzipiert werden, dass sie Datenkonsistenz, Formateinhaltung und andere kritische Parameter überprüfen.
Gegenüberprüfung: Überprüfen Sie Datenpunkte mit mehreren Extraktionsmethoden oder -quellen, um die Zuverlässigkeit zu verbessern. Konsistente Informationen über verschiedene Extraktionsansätze hinweg sorgen für ein höheres Maß an Vertrauen in die Genauigkeit der Daten.
Regelmäßige Audits: Führen Sie regelmäßige Prüfungen des Extraktionsprozesses durch, um auftretende Probleme zu identifizieren und zu beheben. Regelmäßige Überprüfungen tragen dazu bei, die Genauigkeit der Daten im Laufe der Zeit aufrechtzuerhalten, insbesondere im Zusammenhang mit sich entwickelnden Website-Strukturen oder Datenformaten.
Filtern und Organisieren von Daten
Es ist wichtig, die Informationen, die wir aus von Walmart gesponserten Anzeigen erhalten, richtig zu verarbeiten und anzuordnen, damit wir sie besser verstehen und gute Entscheidungen treffen können. In diesem Teil sehen wir uns nützliche Tipps zum guten Organisieren von Daten an und sprechen über einfache Möglichkeiten zum Filtern der Daten, um die Analyse zu vereinfachen.
Tipps zur effektiven Datenorganisation
Strukturierter Datenbankspeicher:
Gekratzte Daten speichern Sie sammeln sie in einer strukturierten Datenbank wie SQL-Datenbanken. Dies hilft, die Dinge organisiert zu halten und macht es einfach, schnell zu finden, was Sie brauchen. Legen Sie die Daten in Tabellen mit den richtigen Kategorien ab, um sie später einfach analysieren zu können.
Zeitstempel:
Fügen Sie jedem Dateneintrag einen Zeitstempel hinzu, damit Sie nachverfolgen können, wann die Informationen aufgezeichnet wurden. Dies hilft bei der Analyse von Trends und Änderungen im Laufe der Zeit, was insbesondere bei der Arbeit mit historischen Daten nützlich ist.
Kategorisierung und Tagging:
Ordnen Sie Produkte nach gemeinsamen Merkmalen und weisen Sie ihnen Tags zu, damit sie leichter wiederzuerkennen sind. So können Sie Produkte einfacher gruppieren und analysieren, Trends erkennen und Produktkategorien besser verstehen.
Verwendung eindeutiger Kennungen:
Verwenden Sie spezielle Codes, z. B. Produkt-IDs, um verschiedene Datensätze zu verknüpfen. So stellen Sie sicher, dass Sie beim Kombinieren oder Gruppieren von Daten aus verschiedenen Quellen dies korrekt tun und Verwechslungen vermeiden.
Filtertechniken für die Analyse
Preisspannenfilter:
Sortieren Sie Produkte nach verschiedenen Preisklassen, um zu sehen, wie gut sie sich verkaufen. So können wir Preistrends erkennen und sehen, wie wir im Vergleich zur Konkurrenz dastehen.
Filter für Leistungsmetriken:
Filtern Sie Daten anhand von Anzeigenleistungsmetriken wie Klickrate oder Konversionsraten. So können Sie leistungsstarke Produkte und Bereiche für die Verbesserung Ihrer Werbestrategie identifizieren.
Schlüsselwortbasierte Filter:
Erstellen Sie Filter, die Schlüsselwörter verwenden, um Produkte zu finden und anzuzeigen, die mit bestimmten Wörtern oder Suchanfragen in Zusammenhang stehen. Dies hilft uns zu verstehen, was Kunden mögen, und macht es einfacher, Produkte zu finden.
Werbetextfilter:
Verwenden Sie Filter, um Produkte anhand von Werbetexten oder Sonderangeboten zu kategorisieren. So können Sie die Auswirkungen von Werbeaktionen auf die Sichtbarkeit und den Umsatz des Produkts besser beurteilen.
Scrapen Sie gesponserte Walmart-Anzeigen mit Crawlbase
Dieser Leitfaden gibt Ihnen die Informationen und Werkzeuge, um einfach Walmart Sponsored Ads Daten mit JavaScript und der Crawlbase zu erhalten Crawling API. Egal, ob Sie neu im Web Scraping sind oder bereits ein wenig wissen, die Ideen hier geben Ihnen einen guten Start. Wenn Sie Scraping auf anderen Online-Shopping-Sites ausprobieren möchten, wie Amazon, eBay, oder auch AliExpress, Airbnb wir haben noch mehr Anleitungen für Sie zum Anschauen.
Wenn Sie auf Probleme stoßen oder weitere Hilfe benötigen, Crawlbase-Supportteam ist für Sie da. Wir möchten, dass Sie beim Web Scraping erfolgreich sind, und freuen uns, Sie dabei zu unterstützen.
Häufig gestellte Fragen
Wie oft sollte ich aktualisierte Walmart-Anzeigendaten extrahieren?
Um die neuesten Informationen zu Walmart-Werbung zu erhalten, sollten Sie regelmäßig prüfen, ob sich die Produktpreise oder -verfügbarkeit häufig ändern. Behalten Sie Sonderangebote im Auge und prüfen Sie, ob andere Unternehmen ihre Preise ändern. Sehen Sie auch nach, wann Walmart Dinge aktualisiert, und prüfen Sie zu dieser Zeit, ob Ihre Informationen korrekt sind. Es ist wichtig, ein gutes Gleichgewicht zu finden, damit Sie bei Ihren Entscheidungen immer die neuesten Informationen haben.
Was sind gesponserte Artikel bei Walmart?
Gesponserte Artikel bei Walmart sind Produkte, die von Werbetreibenden beworben werden, um eine bessere Sichtbarkeit in Suchergebnissen oder auf Kategorieseiten zu erreichen. Diese Artikel werden strategisch platziert, um die Aufmerksamkeit der Käufer zu erregen und mehr Klicks zu erzielen. Werbetreibende zahlen für diese Premium-Platzierung und gesponserte Produkte sind häufig mit dem Etikett „Gesponsert“ gekennzeichnet. Diese Werbeaktionen sind Teil der Werbeplattform von Walmart und ermöglichen es Verkäufern, die Sichtbarkeit ihrer Produkte zu erhöhen und ein breiteres Publikum zu erreichen.
Gesponserte Artikel bei Walmart können verschiedene Arten von Dingen sein, wie beispielsweise Elektronik oder Dinge für Ihr Zuhause. Werbetreibende nutzen sie, um ihre Produkte den Leuten, die sich bei Walmart umsehen, besser zu präsentieren. Dies macht es für Werbetreibende einfacher, im Wettbewerb zu bestehen und sich darauf zu konzentrieren, die Aufmerksamkeit der richtigen Kunden zu gewinnen. Die gesponserten Artikel fallen auf und Werbetreibende zahlen für diese besondere Werbeaktion.
Wie kann ich Daten zu von Walmart gesponserten Anzeigen erhalten?
Um Daten zu von Walmart gesponserten Anzeigen zu erhalten, können Sie diese Methoden ausprobieren:
Walmart-API: Prüfen Sie, ob Walmart über eine offizielle Methode (z. B. ein einzigartiges Tool) verfügt, um Daten zu gesponserten Anzeigen abzurufen. Dies ist normalerweise die sicherste und am besten anerkannte Methode.
Dienste von Drittanbietern: Informieren Sie sich über andere Unternehmen oder Tools, die sich auf das Sammeln und Teilen von Daten zu von Walmart gesponserten Anzeigen konzentrieren.
Web Scraping: Verwenden Sie Web Scraping, um Informationen direkt von der Walmart-Website abzurufen. Stellen Sie einfach sicher, dass Sie deren Regeln und Gesetze einhalten.
Manuelle Extraktion: Sie können Daten auch sammeln, indem Sie die Walmart-Website selbst durchsuchen und die wichtigen Informationen notieren.
Kann ich historische Walmart-Anzeigendaten extrahieren?
Wenn Sie nach früheren Walmart-Anzeigen suchen, kann es aus Datenschutz- und Geschäftsgründen schwierig sein, die offizielle API oder andere Tools zu verwenden. Hier sind jedoch einige einfachere Möglichkeiten zur Suche:
Archivierte Webseiten: Überprüfen Sie Websites, die alte Seitenversionen speichern. Möglicherweise enthalten sie frühere Walmart-Anzeigen.
Regelmäßiges Schaben: Wenn Walmart es zulässt, können Sie mithilfe eines Tools regelmäßig Daten von deren Site erfassen und so einen Verlaufsdatensatz erstellen.
API-Funktionen: Wenn Walmart eine API hat, prüfen Sie, ob Sie damit ältere Anzeigendaten abrufen können. Einige APIs bieten entsprechende Funktionen.
Drittanbieter von Daten: Suchen Sie nach Unternehmen, die sich auf historische E-Commerce-Daten konzentrieren. Sie haben möglicherweise das, was Sie brauchen, einschließlich Walmart-Werbung.
Welche gesetzlichen Bestimmungen gelten für die Extraktion von Walmart-Werbedaten?
Beim Abrufen von Walmart-Werbedaten ist es äußerst wichtig, die Regeln einzuhalten. Folgendes sollten Sie beachten:
Nutzungsbedingungen: Lesen und verstehen Sie die Nutzungsbedingungen von Walmart. Sie sagen Ihnen, was Sie tun dürfen und was nicht.
robots.txt: Walmart verwendet eine Datei namens robots.txt. Befolgen Sie die dortigen Regeln, um rechtliche Probleme zu vermeiden.
Copyright: Beachten Sie die Urheberrechte, insbesondere beim Umgang mit Bildern, Texten oder anderen kreativen Inhalten im Zusammenhang mit Walmart-Anzeigen. Respektieren Sie die geistigen Eigentumsrechte von Walmart und anderen Inhaltserstellern.
Kommerzielle Benutzung: Wenn Sie die Daten für geschäftliche Zwecke verwenden, prüfen Sie, ob bei Walmart besondere Regeln gelten oder Sie Lizenzen benötigen.
Scraping-Richtlinien: Einige Websites erlauben in ihren Servicebedingungen kein Web Scraping. Beachten Sie diese Richtlinien, um rechtliche Konsequenzen zu vermeiden.
Datenschutzgesetze: Wenn Sie mit persönlichen Daten umgehen, denken Sie an Datenschutzgesetze wie die DSGVO (Datenschutz-Grundverordnung). Stellen Sie sicher, dass Sie die Regeln einhalten.
Landesgesetze: Befolgen Sie die Gesetze des Landes, in dem Sie sich befinden. An verschiedenen Orten gelten unterschiedliche Regeln für Web Scraping und Datennutzung.
Der Zugriff auf Echtzeitdaten ist für zahlreiche Unternehmen und Forscher im Bereich der Lebensmittelproduktion von entscheidender Bedeutung. Mehr erfahren
8. September 202328 Minuten gelesen
Meistgelesen aus fortgeschrittenen Web Scraping Tutorials
