Der Verkauf ist noch nicht gestartet. Die Preise sind unverbindlich. Pilotzugang beantragen

Crawler

Der ELDB-Crawler

Sie haben unseren Crawler in Ihren Server-Logs gesehen? Diese Seite erklärt, was er tut, was er erfasst und wie Sie ihn blockieren.

Was er tut

Der ELDB-Crawler speist die Shop-Datenbank Ecommerce Leads Database.

  • Er liest die Startseite, um Plattform, Theme und Apps zu erkennen.
  • Er liest die Kontaktseite, das Impressum und die Sitemaps.
  • Er liest den Produktkatalog über die öffentlichen Feeds des Shops (zum Beispiel products.json bei Shopify oder die öffentliche API von WooCommerce), bis zu 5.000 Produkte.
  • Er kommt ab und zu wieder, um zu prüfen, ob die Daten aktuell sind.

Was er erfasst

  • Daten zum Shop: Plattform, Theme, Apps, Produktanzahl, öffentlicher Katalog (Titel, Preise, Lagerbestand, Marken).
  • Auf der Website veröffentlichte geschäftliche Kontaktdaten: E-Mail, Telefon, Adresse, Links zu sozialen Netzwerken. Zu jedem notiert er die Seite, auf der er es gelesen hat, und das Datum.
  • Eine veröffentlichte E-Mail-Adresse kann personenbezogen sein. Dann ist sie ein personenbezogenes Datum und wird so verarbeitet, wie es unsere Datenschutzerklärung beschreibt.

Er füllt keine Formulare aus, legt keine Konten an und greift auf nichts zu, das eine Anmeldung erfordert.

Wie Sie ihn erkennen

Er sendet den User-Agent-Header von Chrome für Windows-Desktop. Wir aktualisieren die Version etwa alle drei Monate. Er gibt sich nicht unter einem Crawler-Namen aus. In Ihrer robots.txt wendet er die Gruppen „User-agent: ecommerce-data-enrich“ und „User-agent: ecommerce-data-scan“ an. Ohne diese Gruppen wendet er die Gruppe „User-agent: *“ an.

  • Er beachtet Ihre robots.txt, für jede Seite und jede Weiterleitung.
  • Er kommt etwa alle 30 Tage zu jedem Shop zurück, um zu prüfen, ob die Daten noch stimmen.
  • Die Anfragen kommen von unseren Servern und von Servern technischer Dienstleister.
  • Antwortet Ihre Website mit 403 oder 429, wird die Anfrage einmal über einen technischen Dienstleister wiederholt. Gelingt das, können die folgenden Anfragen an Ihre Website 5 Minuten lang darüber laufen. Es gelten dieselben robots.txt-Regeln.

Wie Sie ihn blockieren

Fügen Sie diese Zeilen in Ihre robots.txt ein. Der Crawler besucht Ihre Website dann nicht mehr:

User-agent: ecommerce-data-scan
User-agent: ecommerce-data-enrich
Disallow: /

Das Blockieren des Crawlers löscht keine bereits erfassten Daten. Dafür beantragen Sie die Entfernung Ihres Shops.

Ihren Shop aus der Datenbank entfernen

Sie können Ihre E-Mail-Adresse oder Ihren ganzen Shop entfernen. Die Entfernung wirkt, sobald Sie sie per E-Mail bestätigen. Entfernung beantragen.

Eine Frage? hello@ecommerce-leads-database.com