KI-Crawler blockieren: robots.txt, Cloudflare oder Anubis - und was jedes davon wirklich tut
Einige Links auf dieser Seite sind Affiliate-Links: bei einer Anmeldung darüber erhält diese Seite eine Provision, für Sie ohne Mehrkosten. Preise und Empfehlungen bleiben davon unberührt. Diese Frage kam unter unserem Analytics-Artikel, und sie kam in der richtigen Reihenfolge: robots.txt, Cloudflare, Anubis. Die drei werden als Alternativen diskutiert. Sie sind keine. Eines veröffentlicht eine Präferenz, eines setzt am Rand eine Entscheidung durch, eines lässt den Client für die Seite bezahlen. Die Wahl zwischen ihnen ist die Entscheidung, welches dieser drei Dinge man eigentlich will. ...