Mahlzeit,

Der Status 403 sagt aus, dass eine Ressource existiert, aber nur unter ganz bestimmten Voraussetzungen zugänglich ist, die momentan nicht gegeben sind. Von einer Suchmaschine erwarte ich aber, dass sie mir nur Ergebnisse listet, auf die ich auch zugreifen kann. Alles andere wäre ein Ärgernis.

Da ich mich nicht drauf verlassen, dass eine SuMa das macht, was ich erwarte, zeige ich ihr nur das, was ich will.
Ein 403 kann für einen Hacker ein Hinweis sein, da ist was interessantes, da probieren wir doch mal. Evtl. suchen die sogar gezielt nach 403 oder ähnlichem.
Ausserdem sieht es blöd aus, wenn jemand eine meiner Seiten bei Google sucht und bekommt dann irgendwo ein "Forbidden" um die Ohren gehauen. Sieht einfach nicht einladend aus ;)

Ich hoffe ich konnte deine Verwirrung vergrössern ;)