robots.txt: Allowlist für KI-Bots + Sitemap

robots.txt ist eine kleine Textdatei im Stammverzeichnis Ihrer Website, die Bots mitteilt, was sie lesen dürfen; dieser Fix schreibt sie neu, um KI-Crawler ausdrücklich zuzulassen und auf Ihre Sitemap zu verweisen.

Warum KI-Suchmaschinen dies lesen

Wenn diese Datei versehentlich KI-Crawler blockiert, erfassen sie Ihre Website überhaupt nicht. Sie ausdrücklich zuzulassen, ist daher die grundlegende Erlaubnis, um in KI-Antworten zu erscheinen.

So erkennen Sie, ob es Sie betrifft

robots.txt fehlt, eine Disallow-Regel blockiert einen KI-Crawler oder es gibt keine Direktive „Sitemap:“.

Auf Ihrer Plattform umsetzen

Wo Sie diese Änderung vornehmen, hängt von Ihrer Plattform ab. Öffnen Sie die Schritt-für-Schritt-Anleitung für WordPress, Shopify, Wix und weitere Plattformen.

So erkennen Sie, dass es erledigt ist

Markieren Sie die Korrektur nach der Änderung in Ihrem Dashboard als umgesetzt. Findrix prüft die Live-Seite sofort erneut; der nächste Scan bestätigt das Ergebnis. Sobald die Korrektur wirksam ist, gilt die zugehörige Prüfung als bestanden. Auch nicht markierte Änderungen erkennt derselbe Scan.