Wie man KI-Crawler reinlegt

https://www.heise.de/news/Nepenthes-eine-Teergrube-fuer-KI-Webcrawler-10255982.html

Netter Ansatz. Kann noch ein paar Verfeinerungen vertragen

  • nette Crawler (mit robot.txt) nicht ins Labyrinth schicken
  • echten Inhalt vor bösen Crawlern verstecken sobald sie erkannt sind
  • böse Crawler ausbremsen
  • böse Crawler absichtlich mit Unsinn füttern (geblockte Threads :wink: )
    :footprints:

Da dürfte einigen das Hemd näher als die Hose sein und sie würden lieber im Google Ranking weiter oben stehen