Hallo Forumianer
,
ich möchte über die Robots.txt im Projekt das Durchsuchen von Unterverzeichnissen verhindern. Ist das so korrekt umgesetzt?
# Erstellt mit Zeta Producer Desktop CMS http://www.zeta-producer.com
# Diese Verzeichnisse/Dateien sollen nicht
# durchsucht werden
User-agent: *
Disallow: /kundenprojekte_review/*
Disallow: /kundenprojekte_review/
User-agent: *
Sitemap: https://www.consultoro.de/sitemap.xml
Aktuell habe ich Unterverzeichnisse entfernt, damit Projekte nicht eingesehen werden können.
Oder kann ich hier eine elegantere Lösung umsetzen? Passwortschutz oder ähnliches? Ich habe die Verzeichnisse nicht im Zeta-Projekt selber angelegt, sie wurden aber erfolgreich gecrawlt :wacko:
Lieben Dank im Voraus.