Warum Feed-AI deine Website abruft
Abrufe mit der Kennung „Feed-AI-Websiteanalyse/1.0“ stammen von Feed-AI. Sie prüfen die öffentliche Website eines Eintrags, für den ein Beratungsbericht erstellt wird, zum Beispiel ob Telefonnummer und Öffnungszeiten mit dem Eintrag übereinstimmen.
Umfang: höchstens ein Lauf je Eintrag und Tag mit bis zu neun Abrufen (robots.txt, llms.txt, Sitemap samt einer darin verwiesenen Teil-Sitemap, Startseite und bis zu vier Unterseiten), nacheinander mit Pause. Keine Formulare, keine Anmeldung, keine Cookies.
Die robots.txt wird beachtet. So sperrst du den Abruf:
User-agent: Feed-AI-Websiteanalyse Disallow: /
Gespeichert werden Prüfergebnisse wie „Telefonnummer gefunden“, Zahlen und kurze Auszüge aus öffentlich sichtbarem Seitentext als Beleg: höchstens 120 Zeichen je Auszug und höchstens drei je Prüfpunkt, aus Titel, Überschrift, Anschrift, Telefonnummer, Öffnungszeiten und der Firmenangabe im Impressum sowie aus den Namensangaben der Seite, auch aus meta-Angaben und strukturierten Daten. Findet die Prüfung einen absichtlich unsichtbaren Block mit Links auf fremde Seiten, besteht der Auszug stattdessen aus der Kennzeichnung dieses Blocks und seiner Stilangabe, nie aus Linktexten oder Linkzielen. E-Mail-Adressen werden maskiert. Nicht gespeichert werden Roh-HTML, ganzer Seitentext und weitere Angaben aus Impressum oder Kontaktseite.
Dieselbe Kennung nutzt Feed-AI, wenn ein Kunde beim Anlegen eines Eintrags seine Website angibt, um daraus Vorschläge für seine Angaben zu lesen. Dann rufen wir die robots.txt, die Startseite und höchstens drei weitere verlinkte Seiten derselben Website ab, etwa eine Seite mit Öffnungszeiten, eine Reservierungsseite oder das Impressum, mit Weiterleitungen höchstens zwölf Abrufe. Die robots.txt prüfen wir für jeden Server, auch nach einer Weiterleitung, und lesen sie je Anfrage nur einmal; ist sie nicht lesbar, rufen wir von diesem Server keine Seite ab. Die Seiten werden nur während der Anfrage ausgewertet und nicht gespeichert; die angegebene Website-Adresse wird nicht protokolliert und nur gespeichert, wenn der Kunde sie als seine eigene Website bestätigt. Übernommen wird nur, was der Kunde bestätigt, nie E-Mail-Adressen oder Bewertungen. Die Sperre per robots.txt oben gilt auch hierfür.
Die Kennung „Feed-AI-QuellenPruefer/1.0“ ruft je Portal oder Verzeichnis die robots.txt und einmal die Startseite ab, nach einer Weiterleitung zusätzlich die robots.txt des neuen Hosts, um dort den Weg zum Eintragen zu finden.
So sperrst du diese Kennung:
User-agent: Feed-AI-QuellenPruefer Disallow: /
Fragen oder Hinweise: Die Kontaktdaten stehen im Impressum.