Wie Seiten zum Indexieren von Suchmaschinen ausschließen?

In der robots.txt (liegt im Drupal Verzeichnis) kannst du angeben was Suchmaschinen nicht indizieren dürfen.

Gemacht wirds so:

als Beispiel für ne robots.txt:
Drupalcenter's robots.txt

Alternativ kannst Du auch noch noindex mit http://drupal.org/project/nodewords in den Header schreiben. Hat den Vorteil, daß Du dann nicht immer mit ftp auf den Server mußt.

-----------------------------------
Drupal Ruhrgebiet Usergroup
http://groups.drupal.org/ruhrgebiet

Vielen Dank für Eure Antworten.

Alternativ kannst Du auch noch noindex mit http://drupal.org/project/nodewords in den Header schreiben. Hat den Vorteil, daß Du dann nicht immer mit ftp auf den Server mußt.

Gute Idee und danke für den Link, glueckskind. Ich habe eigentlich nur vor, eine einzige Seite nicht finden zu lassen, so daß ich momentan das Modul wohl nicht so dringend brauche.

In der robots.txt (liegt im Drupal Verzeichnis) kannst du angeben was Suchmaschinen nicht indizieren dürfen.

Vielen Dank auch für den Link, Iglos.

Habe nun also robots.txt in das Stammverzeichnis meiner gesamten Website kopiert - mein Drupal-Verzeichnis liegt in einem Unterverzeichnis hier, /foyer - und unter

# Paths (clean URLs)

von robots.txt diese Links (zum Auschließen desselben nodes und nicht einer ganzen Seite) eingefügt (gibt es noch weitere URLs für denselben node, die woanders einzufügen wären?):

Diese beiden Links führen also zum selben node.

Hoffe, es funktioniert so.

Nette Grüße, Dirk
---------------------------------------------------------------------------
www.galerie-der-fotos.de

zwar auf englisch aber ich hoffe das wird dir weiterhelfen:
http://tips.webdesign10.com/robots-txt-and-drupal
Übrigens kannst du bei Google Webmaster Tools deine robots.txt testen!

Schon indizierte Seiten kannst du soweit ich weiß nicht mit der robots.txt ausschließen, die must du manuell austragen. Wie das geht siehst du auch bei Google Webmaster Tools.

Ich hoffe ich konnte dir etwas weiterhelfen!

Vielen Dank, Iglos,

vor allem auch für die Links.

Ja, gute Idee die Google-Tools zu verwenden, hatte ich nicht dran gedacht, werde ich versuchen.

Schon indizierte Seiten kannst du soweit ich weiß nicht mit der robots.txt ausschließen, die must du manuell austragen.
Ich glaube oder hoffe, nach einiger Zeit werden die bei Google automatisch gelöscht, wenn sie nicht mehr vorhanden sind oder indexiert werden sollen.

Ja, die robots.txt-Seite ist gut, vielen Dank, hatte ich noch nicht gefunden...bin mir nur etwas unsicher, daß meine robots.txt-Datei auch das tut, was ich meine...

Ja, hast mir gut geholfen, vielen Dank, nette Grüße, Dirk

---------------------------------------------------------------------------
www.galerie-der-fotos.de