robots txt Frage

[kim s.]

Hi zusammen!

Ich würde gerne per robots txt bestimmte Seiten von der Indexierung ausschließen.
Wenn ich:

User-agent: *
Disallow: /profile.php

angebe, werden dann auch Seiten wie:

/profile.php?mode=viewprofile&u=42
/profile.php?mode=viewprofile&u=45

von der Indexierung ausgeschlossen?
Wenn nein, wie mache ich das, ohne jede Datei einzeln angeben zu müssen?
Wildcard dürfen ja nicht vergeben werden?

Danke!

 

[Duvi]

QUOTE Wenn ich:
User-agent: *
Disallow: /profile.php
angebe, werden dann auch Seiten wie:
/profile.php?mode=viewprofile&u=42
/profile.php?mode=viewprofile&u=45
von der Indexierung ausgeschlossen?

Ja!
Im Prinzip ist es auch eine Art Wildcard. Alles was mit /profile.php beginnt ist ausgeschlossen.

Zum Vergleich aus http://de.selfhtml.org/diverses/robots.htm

QUOTE Bei den Angaben zu Disallow: können Sie Verzeichnispfade und einzelne Dateien mit Pfadangabe angeben. Wildcards wie * oder *.* sind dabei nicht erlaubt. Achten Sie darauf, bei Verzeichnispfaden einen abschließenden Schrägstrich / zu notieren. Wenn Sie nämlich beispielsweise /index notieren, wäre auch die Datei /index.html betroffen, und nicht nur das Unterverzeichnis /index/.


Gruß Duvi

 

[kim s.]

Merci!