Links

Es gibt ein Modul http://drupal.org/project/site_map, damit kannst du eine Sitemap erstellen, die sich dynamisch an das Menü anpaßt.
Dort kann man auch Taxonomie ausdrücklich nicht berücksichtigen und natürlich auch ganze Menüs ausschließen.

Und das Ganze kann man dann auch noch schick stylen (siehe: http://www.drupalcenter.de/node/38585)

viele Grüße
Berthold Lausch

Ja, vielen Dank, genau auf das Video bin ich heute gestossen. Das Modul kenne ich natürlich. Da war eine "schöne" Sitemap das Thema.
Hier gehts mir um de eigentlichen Links. Also für die Bots, Google etc.
Die Links sollen garnicht gespidert werden.

path, path_auto und ähnliches an.

Einfach mal in der Modulsuche das Stichwort path eingeben.

mod_rewrite muss natürlich auf dem Server aktiviert sein.

Google davon abhalten verlinkte Inhalte zu speichern... das wird schwierig.
Du kannst versuchen, die Dinge in der robots.txt einzutragen, damit die Bots ausgesperrt sind, aber meine Meinung nach spidert Google alle nur irgendwie erdenklichen verlinkten Inhalte.

Was kann ein Grund dafür sein, dass es nicht gewünscht ist, diese Links zu spidern ?

Grüße
Berthold

Google speichert mitnichten alle verlinkten Inhalte. Man sollte als Webmaster im Gegenteil darauf achten, dass nur relevante Links im Index landen. Links die zu doppeltem Content führen (einfaches Beispiel: Link zur Startseite über www.domain.de und über www.domain.de/startseite.html), verschlechtern das Google-Ranking.

Links, denen Google nicht folgen soll, schließt man mit "rel=nofollow" aus (siehe https://de.wikipedia.org/wiki/Nofollow). Seiten, die nicht indiziert werden sollen kann man mit einem Meta-Tag vor gängigen Suchbots "schützen" (siehe https://en.wikipedia.org/wiki/Noindex )

Noindex, nofollow und auch robots.txt funktionieren leider nicht so, wie man sich das vorstellt.
Ich habe selbst Verzeichnisse in der Robots.txt für Bots ausgesperrt, aber trotzdem sind die Dinger im index drin.

Das wird auch im Netz viel diskutiert, z.B. hier

Aus meiner Sicht sind diese Dinge nur Placebos.
Wir dürfen ja nicht vergessen. Google ausschließliches Interesse ist das Datensammeln um den Besucher geeigente Werbung und gute Suchergebnisse anzuzeigen.
Da werden die sich sicherlich nicht durch so ein paar Einträge hier und da von ihrem Weg abbringen lassen.

viele Grüße
Berthold

Google hat aber auch ein Interesse daran, seine Suchergebnisse möglichst gut zu erhalten und allein schon deswegen glaube ich, dass sie gewisse Regeln aufstellen, an die sich Webmaster zu halten haben und an die sich Google bezgl. der Suchergebnisse auch selbst hält (ob sie die Seiten dennoch speichern steht auf einem anderen Blatt und das ist auch nicht unwahrscheinlich, aber hier geht es ja um die angezeigten Suchergebnisse).

Wenn man es "richtig" macht (was immer das bei SEO auch heißt), kann man schon beeinflussen, was in den Suchergebnissen auftaucht und was nicht.

Richtig ist aber auch: Alles, was mal im Index ist, ist nur sehr schwer wieder rauszubekommen, daher kann deine Aussage durchaus richtig sein, dass immer noch alte Seiten im Index zu finden sind. Ein nachträgliches Ändern der robots.txt oder setzen von nofollow oder noindex bereinigt nicht den Suchindex. Deshalb sollte man sich gleich zu Anfang eines Webprojekts darüber Gedanken machen und nicht erst, wenn die Seite schon live ist. Dann ist es zu spät.

Hallo!

Also ich habe ja die friendly URLs. Wieso werden dann die Links mit node/* überhaupt gespidert?
Oder diese URLs: http://www.abc.com/user/login?destination=node/5%23comment-form?

Weil Drupal intern mit den URLs node/### arbeitet. Du kannst Dir aber das Modul Global Redirect installieren, dann werden die URLs vom Typ node/### nicht mehr gezeigt, wenn ein Alias dafür existiert sondern immer der Alias. Damit ist Dein Problem aus der Welt, denn dann findet Google die falschen URLs nicht mehr.

Beste Grüße
Werner

Ja, ok, ich weiss, dass intern die URLs node/* sind.
Global redirect hatte ich einmal kurz installiert, da hatte ich aber irgendwas mit zuvielen Redirects und ganz komische URLs.
Da habe ich es schnell wieder deinstalliert.
Aber grundsätzlich: DAS ist das Modul, bei dem ich richtig bin?

Ja, aber nimm die Version 1.3! Die 1.4 tut es nicht, wie Du Dich noch richtig erinnerst.

Beste Grüße
Werner