SEO-Software von Suchmaschinenoptimierung.de

Frage zur robots.txt

(hier klicken, um zum Original Thread zu gelangen)
sommer
Hi,

sollte man für Subdomains eigentlich auch eine robots.txt anlegen oder kann man die Verzeichnisse in die robots.txt der Hauptadresse eintragen?

Das Verzeichnis der Subdomain liegt auch in dem der Hauptadresse auf dem FTP.

Springt die Suchmaschine dann drauf an, wenn die Einträge für die Subdomain so aussehen?

Disallow: /subdomain/verzeichnis/
Disallow: /subdomain/verzeichnis2/


Noch eine Frage...
Schmeißt google die Seiten der nicht erlaubten Verzeichnisse wieder raus, wenn die robots.txt nachträglich hochgeladen wurde?

EDIT: Noch was... ist ein Eintrag in die Meta Tags nötig, damit die robots.txt gefunden wird?
milahu
die robots.txt muss nur im root verzeichnis liegen.

Zitat:
Schmeißt google die Seiten der nicht erlaubten Verzeichnisse wieder raus, wenn die robots.txt nachträglich hochgeladen wurde?
sollte schon.

Zitat:
EDIT: Noch was... ist ein Eintrag in die Meta Tags nötig, damit die robots.txt gefunden wird?
nö. jeder robot muss sich erst die robots.txt angucken, bevor er weitermacht
sommer
Kann man einzelne Seiten auch irgendwie anders vor Suchmaschinen verstecken, außer mit einem Eintrag in die robots.txt? Vielleicht irgendein Eintrag im Header?
milahu
ich glaube das war
code:
1:
<meta name="robots" content="noindex, nofollow" />
(hier klicken, um zum Original Thread zu gelangen)



Tipp: Ranking-Konzept.de - Das SEO-Forum (Forum rund um die Suchmaschinenoptimierung) der artaxo AG.
Das große Versicherungs ABC von Versicherung.de - mit allen Aspekten der Computerversicherungen!
Fan-Foren.de, die große Community mit Musikforum ist ab sofort online.