Aloha ;)

Nun frage ich mich, ob Google diese Seiten eigentlich noch bis zum Jahr 16.000 aufsucht und crawlt?

Naja, möglich ist das schon.

Oder kann man das irgendwie stoppen?

Dazu hast du ja schon Antworten bekommen. Die Folgefrage die sich mir dabei aufdrängt: warum sollte man das überhaupt unterbinden wollen? Wegen dem bisschen Traffic den eine 404-Fehlerseite ausmacht? Ich frage mich einfacb nur, inwiefern da Relevanz besteht. Für gewöhnlich stecke ich keinen übertriebenen Aufwand in die Frage, wie ein Bot auf meine Seite reagiert, sofern es dadurch keine deutlichen Nachteile für menschliche Benutzer gibt?

Grüße,

RIDER