StartseiteSEO

X-Robot-Tag

12.12.2007
Nein, es hat nichts zu tun mit Boys-Day oder Gilrs Day.
Es ist kein neuer X-Robot-Day.
Es geht nicht um einen Tag im jahr, es geht um neue TAGS.

Ganz einfach: Google und Yahoo arbeiten jetzt beide mit dem neuen X-Robot-Tag.

Zunächst hatten sich alle gefreut, daß Google auch PDF-Files, Video- und Audio-Dateien indiziert. Aber die Nachteile liegen auf der Hand: Was indiziert ist, kann kostenlos downgeloaded werden. Also will man einige Files indizieren, andere aber nicht. Für die Steuerung der Indizierung dieser Media-Files wird das X-Robot-Tag eingesetzt.

Das X-Robot Tag kann man sowohl im http-Header eines Dokuments als auch als Meta-Tag einer Webseite einsetzen. Einige Programme zur PDF-Generierung erlauben vier X-Robot-Tags im http-Header.

X-Robots-Tag: NOINDEX (die URL wird nicht in den Suchergebnissen angezeigt)
X-Robots-Tag: NOARCHIVE (die Media-Files werden nicht von den SUMAs archiviert und keine Links auf den Cache )
X-Robots-Tag: NOSNIPPET (keine Zusammenfassung in den Suchergebnissen)
X-Robots-Tag: NOFOLLOW (Die SUMAs sollen den Links innerhalb der Media-Files nicht folgen)

Man kann die Steuerung aber auch ganz einfach im Header einer Webseite als letzter Eintrag der META TAGS unterbringen:
Anstelle vom „normalen“
<META NAME="robots" CONTENT="INDEX,FOLLOW,noodp">
Steht dann
<meta name="robots" content="noarchive"> oder
<meta name="robots" content="nosnippet"> oder
<meta name="robots" content="nofollow"> oder
<meta name="robots" content="noindex"> oder in Kombination.

Dadurch können ganze Unterseiten voller PDF’s, Video- oder Audio-Dateien von der Bearbeitung durch Google und Yahoo ausgeschlossen werden. Kostenpflichtige Inhalte werden geschützt.

Wie beeinflußt das X-Robots-Tag den Pagerank?

Das X-Robots-Tag wurde entwickelt, um den Zugang der Suchmaschinen zu Webseiten zu regulieren. Ohne Zugriffsbeschränkung, kein X-Robot-Tag. Die Suchmaschinenrangposition SERP und damit der PageRank werden durch das X-Robot-Tag nicht direkt beeinflußt. Allerdings hat Google dann diese Seiten nicht im Index, Archiv oder Cache. Wird von Dritten aber gerade auf diese Seiten häufig verlinkt, würde das den SERP unterschätzen und verschlechtern gegenüber einer Webseite ohne diese Beschränkungen.

Alles hat - wie immer - zwei Seiten.


Zusammenfassung

Die Funktonen 4 neuer X-robot Tags werden beschreiben und an Beispielcode für die robot.txt demonstriert.


Dr. Wolf Blass

Kommentare

Hier klicken, um einen Kommentar zu schreiben

Microsoft neues AdLab Google-konforme Website Optimierung
© suma-pro.de (2007- Mit Suchmaschinenoptimierung nach dem
SEO MASTERPLAN
und gutem Shop-Design auf die erste Seite
Datum der letzten Änderung