Es gibt manchmal Gründe, wieso es gewünscht ist, dass Suchmaschinen eine Website nicht indizieren. Beispielsweise möchtet ihr eure Website erst aufbauen, bevor Google und co. die Website in ihre Suchergebnisse aufnehmen.
WordPress
Name des Content Management Systems (CMS) bietet dazu eine eingebaute Funktion. Diese findet ihr in Eurem Dashboard
Englisch für: Armaturenbrett unter Einstellungen >> Lesen:
Indizierung durch Suchmaschinen verhindern
Beachtet aber, dass diese Einstellung von den Suchmaschinen honieriert werden muss. Die großen Suchmaschinen halten sich jedoch in der Regel an diesen Wunsch. Alternativ möchtet ihr eventuell die Seite vorübergehend in den Wartungsmodus schalten oder sogar ganz mit einem Passwort schützen (bspw. für einen privaten Blog).