robots.txt

M

miraxel

Mitglied
HI,
bin wieder einmal auf eure Hilfe angewiesen. Meine Seite hat eine Robots txt, die denke ich mit 7.000 Zeichen wohl zu lang ist.
jetzt hab ich seit 5 monaten einen neuen Bereich auf meinem Portal, der Inhaltlich komplett von den anderen Teilen getrennt ist. kann ich für diesen teil in ein unterverzeichnis eine weitere robots.txt legen, die auf diesen content optimiert ist? ich möchte mir den anderen teil ja nicht schwächen.
danke für eure meinungen
lg, maxomio
 
Die Robots.txt muss unter /robots.txt erreibar sein, und nicht erst in /ordner/robots.txt, denn sonst werden die meisten der noch vernünftigen Crawler diese nicht beachten.



MfG Sascha Ahlers
 
Sie müssen sich einloggen oder registrieren, um hier antworten zu können.
Zurück
Oben