robots.txt aktivieren

Einstellungen öffnen

Öffnen Sie die Einstellungen (Zahnradsymbol) und wählen Sie anschließend Einstellungen.

robots.txt aktivieren und Werte festlegen

Wählen Sie den Reiter „Dateien„. Wenn Sie den Haken bei „Aktivieren .robots.txt“ setzen, können Sie im Feld darunter diverse Einträge machen.

Mit der robots.txt Datei kann zum Beispiel festlegt werden, welche Seiten und Verzeichnisse von Google^® und anderen Suchmaschinen indexiert werden dürfen und welche nicht.

Beispiele für Werte der robots.txt finden Sie auf Wikipedia.