Amazon Massenimport mit Hilfe von data-miner.io und WP All Import

Sobald eine Seite sehr viele Produkte haben soll, stößt man schnell an das Problem, dass es trotz unserer Import-Schnittstelle von Amazon relativ lange dauert 1.000 oder mehr Produkte zu importieren. Das liegt daran, dass Amazon pro Abfrage maximal 10 Produkte liefert. Während andere Partnerprogramme wie zanox oder affilinet oftmals eine CSV Datei der Shops anbieten, die mit Hilfe unserer WP All Import Extension relativ einfach importiert werden kann, gibt es sowas bei Amazon nicht.

Aber wir wären ja nicht wir, wenn wir für dieses „Problem“ keine Lösung parat hätten. 😉 Wir erstellen uns einfach selbst eine CSV für die Amazon Produkte. Dazu brauchen wir theoretisch nur die Namen und die ASIN der Produkte und sobald diese beiden Daten eingegeben sind, werden fehlende Informationen (Preis, Bilder, Ref-Link, etc.) beim Aktualisieren automatisch gezogen. Um eine solche CSV Datei zu erstellen gibt es nun mehrere Möglichkeiten.

Die technisch simpelste, aber auch aufwendigste Lösung wäre es das ganze per Hand anzulegen. Dazu öffnen wir Excel und schreiben in Spalte 1 die ASIN des Produktes und in Spalte 2 den Namen, speichern es als CSV und machen beim letzten Schritt dieses Artikels weiter.

Option 2: wir automatisieren diese Arbeit mit Hilfe von data-miner.io!

Bevor wir loslegen noch 2 wichtige Infos:

Wie funktioniert Data Miner?

Data Miner ist ein kleines Tool, welches eine Webseite untersucht, verschiedene Daten aus dem Quelltext zieht und diese anschließend in einer CSV ablegen kann. Für Technik-Laien wird es nun etwas komplexer, da wir hier mit Fremdwörtern wie XPath arbeiten, aber es wird ja alles gut erklärt und eigentlich ist es nur noch Copy/Paste.

Los geht’s!

Als erstes müssen wir uns die Chrome Extension Data Scraper installieren und uns einen kostenlosen Account bei data-miner.io einrichten. Bei einem kostenlosen Account haben wir bis zu 500 Abfragen pro Monat, was je Amazon-Seite mit 24 Produkten bis zu 12.000 Produkte bedeutet. Damit kann man, denke ich, arbeiten. (*hust* zur Not gibt’s ja wegwerf-E-Mail-Adressen, *hust*)

Wir navigieren nun bei amazon.de in die Kategorie, aus der wir die Produkte importieren wollen. Für unser Beispiel verwenden wir die Kategorie Elektronik » Kamera » Digitalkamera » Spiegelreflexkameras. Natürlich kann man an dieser Stelle nun noch deutlich detaillierter filtern, zum Beispiel nach Megapixel, Marke, Preis oder Bewertung. Insbesondere das Sortieren nach Marken und „Unter-Typen“ macht in so fern Sinn, wenn man die Produkte auch direkt in verschiedene Kategorien einsortieren will. In unserem Beispiel bleiben wir nun aber etwas „oberflächlich“ und arbeiten mir der ungefilterten Hauptkategorie.

Sobald unsere „Filtereinstellung“ wie gewünscht ist klicken wir oben rechts bei Chrome auf das Data Miner Icon und kurz darauf öffnet sich ein kleines Dropdown in dem schon jede Menge vordefinierter „Recipes“ zu finden sind. Wir klicken jedoch auf „Create Recipe“ und erstellen uns ein eigenes, so wie wir es brauchen.

Data Miner Einstellungen

Auf der linken Seiten finden wir nun verschiedene Einstellungsmöglichkeiten, die innerhalb verschiedener Toogles versteckt sind.

1. Auto Pagination Settings

Als erstes definieren wir die Pagination, sodass Data Miner automatisch weitere Seiten scrapen kann. Dazu tragen wir folgende Werte ein:

• XPath for Next page: //span[@id='pagnNextString']
• Navigation Type: Click on Element Specified
• Time Between Page Navigation: 10

2. XPath for Rows

Hier wird nun festgelegt, wann eine neue Row (also Tabellenzeile) erstellt werden soll, das passiert natürlich nach jedem Produkt:

• XPath: //*[contains(@class,'s-result-list')]/li

3. Xpath for Columns

In diesem Abschnitt definieren wir nun die einzelnen Spalten der Tabelle und geben an, welche Informationen wir brauchen. In unserem Beispiel wie gesagt nur Title und ASIN. Dazu geben wir im linken Teil den XPath-Code an und legen rechts davon den Namen der Spalte fest. Hier fügen wir folgende Werte ein:

• @data-asin ASIN
• .//a/h2/@data-attribute TITLE

Über einen Klick auf das Zahnrad-Symbol können wir noch definieren, welchen Wert wir aus den HTML-Tags ziehen wollen, in dem Fall sollte es auf Text stehen (ist es auch per Default).

Die üblichen Settings lassen wir so wie sie sind bzw. leer und testen nun unser Rezept durch das Klicken auf den Scrape-Button und sollten daraufhin mehrere Einträge erhalten.

Wenn das geschafft ist klicken wir nun links im Toggle „Auto Pagination“ auf den Test Next Page -Button. Im Hintergrund sollte sich nun der Browser auch neugeladen haben und wenn wir auf die Amazon-Seite schauen und runter scrollen müsste die Pagination auf auf Seite 2 stehen.

Wenn das bei dir nun auch so aussieht, klicken wir auf Start Auto Pagination und lehnen uns kurz zurück. Data Miner geht nun die komplette Kategorie durch, Seite für Seite, und sammelt fleißig die von uns definierten Daten. Ich geh in der Zeit eine rauchen und mach mir einen Kaffee.

So, wieder da und Data Miner arbeitet noch. Nach ca. 10 Minuten ist unser Crawl dann auch fertig und hat alle Produkte aus dieser Kategorie gefunden. Nicht erschrecken, dass im rechten Fenster nur wenige Produkte stehen, die Liste zeigt immer nur die aktuelle Seite an, in der Leiste unten steht aber bei Accumulated Rows die gesamte Anzahl der gesammelten Daten.

Wir klicken nun rechts unten auf den Button Download und erhalten eine CSV Datei die wir im Anschluss über die WP All Import Extension in unser System importieren können.

CSV via WP All Import importieren

Schritt 1: Wir klicken im Backend beim Punkt „All Import“ auf „New Import“, wählen die Datei aus und definieren anschließend Erstelle neue Produkte, über das Dropdown.

Schritt 2 zeigt nun ein Beispiel Datensatz, hier müssen wir keine Änderungen vornehmen und können direkt weiter.

Bei Schritt 3 ziehen wir per Drag & Drop die asin und den title von der rechten Seite in die entsprechenden Felder. Der Title ist oben das erste Feld und die ASIN finden wir unter dem Punkt „Affiliate Theme – Produktinformationen“ (lautet in dem Fall Artikel-Nr.). Ebenfalls hier findet man die beiden Einstellungen Portal & Shop, wo jeweils Amazon ausgewählt werden muss.

Bei Schritt 4 ziehen wir in das Feld Unique Identifier noch die ASIN von der rechten Seite und klicken anschließend auf weiter, bevor wir auf der nächsten Seite nochmals ein paar finale Informationen finden und den Import-Vorgang über den Button Bestätigen & Import starten ausführen.

Das dauert nun wieder ein paar Minuten und sobald wir durch sind finden wir unter dem Menüpunkt Produkte nun unsere importierten Artikel. Damit wir nun die Daten wie Preis, Bilder und Link bekommen müssen wir unter dem Punkt Import »  Amazon » Einstellungen diese Daten natürlich auf Aktualisieren gestellt haben! Um den Updateprozess direkt anzustoßen gehen wir nun auf den Punkt Debug und scrollen ans Ende zu „Cronjobs manuell ausführen“. Dort rufen wir nun den Link der Amazon API im Browser auf und warten erneut kurze Zeit. Je nach Menge der Produkte, der Einstellung ob externe oder interne Bilder und die Scriptlaufzeit des Servers etc. muss der Cronjob eventuell mehrmals ausgeführt werden, damit alle Produkte aktualisiert werden (alternativ werden die Produkte aber auch durch den automatischen Updateprozess innerhalb der nächsten X Stunden aktualisiert). Und voilà, fertig!

Update (10.11.2016 – 13:40):

Da die Frage aufkam, ob das ganze nicht gegen die AGB von Amazon verstößt hier ein kleines Updates.

Kurz und knapp: Nein! Da wir bei diesem Vorgehen keine „versteckten“ Daten abfragen ist alles in Ordnung und Amazon kennt das Tool und hat dagegen keine Maßnahmen ergriffen (und plant das auch nicht).

Update (06.04.2017):

Passende Video-Anleitung unseres Partners mutric.com

Mit dem Laden des Videos akzeptieren Sie die Datenschutzerklärung von YouTube.
Mehr erfahren

Video laden

YouTube immer entsperren