robot.txt

[PhilippS]

Hi Frank, Hi All,

habe hier gelesen, das man besonders auf Crawlertrap achten sollte. Deswegen will ich als Newbie gleich vorbildlich mich darum kümmern und versuche das nicht zu ignorieren. ;-)

Ich habe aber ein Problem: Was könnte es sein, wenn bei der Installation folgende Meldung erscheint:

"Die 'robots.txt' konnte für die Crawlertrap nicht automatisch angelegt/angepasst werden. Siehe Anleitung bzw. im Adminbereich unter Crawlertrap."

Fehlt mir da noch ne Berechtigung bei nem Ordner?

Danke und Gruß
Philipp

[FrankW]

Nicht unbedingt, da manche Hoster das anlegen oder verändern der /robots.txt einfach nuicht erlauben, aber man ja auch manuell ran kann.

Im Hauptverzeichnis sollte ine robots.txt liegen oder ggf. manuell angelegt werdne, die mind. folgendne Inhalt hat:

User-agent: *
Disallow: /crawlertrap

bzw.

 
User-agent: *
Disallow: /UNTERVERZEICHNIS/crawlertrap

wenn der Affilinator nicht im Hauptverzeichnis liegt.

Gruß
Frank

[PhilippS]

Danke Dir, werde ich heute Abend gleich noch mal checken. Hab nen Server, sogesehen hab ich wohl keine Rechte im Rootverzeichnis.

[Martin-F]

da wird wohl die root der Domain gemeint sein :-))

[PhilippS]

ja klar ;-) sonst wärs ja ends hart.^^