PHP-Web-Stat Support Forum
https://www.php-web-statistik.de/cgi-bin/yabb/YaBB.pl
Board (Deutsch) >> Probleme & Fragen >> robots.txt
https://www.php-web-statistik.de/cgi-bin/yabb/YaBB.pl?num=1507536947

Beitrag begonnen von BMG am 09.10.17 um 10:15:47

Titel: robots.txt
Beitrag von BMG am 09.10.17 um 10:15:47
Hallo Zusammen.

Würde gerne vermeiden, das Suchmaschinen u.a. das Verzeichnis meines PHP Web Stat crawlt.
Wäre die Ergänzung meiner robots.txt so ok?

Disallow: /webstatistik/
Allow: /webstatistik/track.php
Allow: /webstatistik/counter.php

Viele Grüße
Tom

Titel: Re: robots.txt
Beitrag von Holger am 09.10.17 um 23:07:42
Hallo Thomas,

folgender Eintrag würde reichen da Robots auch nicht die track.php oder die counter.php lesen müssen:

Disallow: /webstatistik/

PHP-Web-Stat Support Forum » Powered by YaBB 2.5.2!
YaBB Forum Software © 2000-2012. Alle Rechte vorbehalten.