schlex

Inhalte aus Google und Co. entfernen
Für viele Hard-SEOs zwar schon "normal" dennoch gibt es ja User die nun gerade erst das Gebiet des SEOs betreten haben, demnach richtet sich dieser Artikel auch eher an diese Leute. Alsoo...

Einige Leute plagen sich seit Monaten oder sogar noch länger mit den Cached-Seiten von Google umher, da diese noch indexiert sind, die Seiten seit vergleichsweise der Steinzeit schon nicht mehr auf der Homepage existieren. Wie bekommt man diese "Nerver" nur aus den site: Abfrage Resultaten raus? Hier einige Tipps wie dies zu machen ist.

Zum einen bietet Google die Möglichkeit an mit der URL-Console zu arbeiten. Um diese Console benutzen zu können, muss zuerst jedoch noch ein Account bei Google erstellt werden unter der URL Hier klicken findet man hierzu weitere Informationen dazu. (Option "Konto erstellen)!

Wenn der Account erstellt wurde, loggt man sich unter der besagten URL (Hier klicken) ein. Nun gelangt man zu einer Seite wo einem verschiedene Optionen zur Verfügung stehen, diese wären zum Beispiel:


(x1.) Löschen Sie Seiten, Unterverzeichnisse oder Bilder mit Hilfe einer robots.txt-Datei.

(x2.) Löschen Sie eine einzelne Seite mit Hilfe von Metatags.

(x3.) Löschen Sie einen veralteten Link.

Entfernen mit der robots.txt Datei

(x1.)
Mit dieser Option kann man wie Google sagt Seiten mit Hilfe der robots.txt Datei aus dem Google-Cache entfernen. Hierzu legt man eine Textdatei an die sich wie genannt "robots.txt" heißt. In dieser Datei sind dann die Seiten die Google aus dem Index löschen soll wie folgt anzulegen:
User-agent: * Disallow: /

Diese Option richtet sich an * - das Sternchen drückt hierbei alle Suchmaschinen (Crawler) aus die, der robots.txt Datei beachtung schenken.

INFO: Um nur gezielt dem Googlebot die robots.txt Datei mit den Rules zu servieren, ist die robots.txt Datei wie folgt anzulegen.

User-agent: Googlebot Disallow: /

INFO: Der / (Slash) drückt hier in diesem Beispiel immer die oberste Ebene aus, in der sich die robots.txt Datei aktuell befindet. Um ein zum Beispiel Unterverzeichnis über die Datei auszusperren fügt man hinter dem Slash (/) einfach den Ordnernamen, oder halt die Datei an, Beispiel: Disallow: /unterordner oder Disallow: /datei.php

So, die robots.txt Datei wurde nun angelegt, nun muss man die URI kopieren unter Beispiel: http://www.domain.de/robots.txt - Den kopierten Pfad fügt man nun in die Eingabemaske unter der Google-Seite: http://services.google.com:8882/urlc...ler?cmd=robots ein und bestätigt die Eingabe mit "Seiten löschen".


Entfernen mit Metatags

(x2.)
Eine weitere Option wäre, Seiten die noch auf dem Server zu finden sind, die jedoch nicht in Google indexiert werden sollen, bzw. wieder aus dem Index geschmissen werden sollen über Metatags aus dem Google-Index zu "kicken". Folgende zulässige Angaben gibt es für den Ausschluss über die Metatags:

Einzufügen sind die Metatags in den Headbereich der jeweiligen Webseite:


Folgende sechs Metatags schlägt Google selbst vor um Inhalte nicht zu indexieren bzw. Inhalte aus der Suchmaschine wieder auszuschließen.

(1.)
<meta NAME="ROBOTS" CONTENT="NOINDEX, NOFOLLOW"></meta>


Hiermit wird dem Suchroboter die Anweisung gegeben die aktuelle Seite "nicht zu indexieren" und "weitere Links nicht weiterzuverfolgen".

(2.)
<meta NAME="GOOGLEBOT" CONTENT="NOINDEX, NOFOLLOW"></meta>


Mit dieser Metatag-Anweisung sprechen Sie gezielt den Googlebot an, damit dieser die aktuelle Seite nicht indexiert und weitere Links auf dieser Seite nicht weiterverfolgt.

(3.)
<meta NAME="ROBOTS" CONTENT="NOFOLLOW"></meta>


Mit dieser Metatag-Anweisung geben Sie allen Suchmaschinen die Ihre Seite indexieren wollen bzw. wenn sich dieser Robot an die Metataganweisung hält, die Anweisung, sämtliche Links auf der Seite nicht weiterzuverfolgen.

(4.)
<meta NAME="GOOGLEBOT" CONTENT="NOSNIPPET"></meta>


Mit dieser Metataganweisung geben Sie dem Googlebot die Anweisung die aktuelle Seite zwar zu spidern und zu cachen, doch wird die Seite dann in der Suchmaschine ohne der Textvorschau (auch genannt Snippet) angezeigt. Beachtet werden muss hier dass wenn Sie keine Snippets in den Suchmaschinen angezeigt haben wollen, auch Ihre Seiten nicht bei Google gecachet werden.

(5.)
<meta NAME="ROBOTS" CONTENT="NOARCHIVE"></meta>


Diese Metataganweisung gibt dem Suchroboter den Befehl die Seite nicht in der "Archivierten Version" in der Suchmaschine anzuzeigen.

(6.)
<meta NAME="GOOGLEBOT" CONTENT="NOARCHIVE"></meta>


INFO: Diese Metataganweisung tut genau das selbe wie die Anweisung aus (5.), nur richtet sich diese Anweisung nur an den Googlebot und nicht an alle Suchmaschinen-Crawler die Metatags unterstützen.



Entfernen mit der URL-CONSOLE

(x3.)
Nun zurück zu der auch letzten Option die Google bisher anbietet um eine alte Seite aus der Suchmaschine zu entfernen. (Löschen Sie einen veralteten Link.) - Über diese Option (erreichbar unter der URI: http://services.google.com:8882/urlc...r?cmd=siteDown) geben Sie dem Google-Remove-Service die Anweisung eine Seite die nicht mehr auf Ihrem Server existiert, die jedoch noch bei Google in den Suchergebnissen auftaucht, aus dem Index zu entfernen (Wichtig hierbei: Google entfernt die Seiten nur wenn die Seiten auch wirklich nicht auf dem Server vorhanden sind - Sprich der Fehler 404 ausgespuckt wird. Im Normalfall dauert die Bearbeitung der Entfernung ca. 3-5 Werktage, so gibt es auf jeden Fall Google an - aus eigener Erfahrung kann es aber auch mal bis zu zwei Wochen dauern!).

Auf der Seite stehen Ihnen drei verschiedene Optionen zur Verfügung.


- (1.) alle zu der URL gehörigen Informationen

- (2.) Snippet-Teil des Ergebnisses (einschließlich im Cache gespeicherter Version)

- (3.) nur im Cache gespeicherte Version




Die Optionen sollten hierbei eigentlich selbsterklärend sein!

Zuletzt können Sie auch mit den Robots-Anweisungen Bilder vor dem Googlebot oder anderen Robots schützen, hier die Anweisungen - wie die Robot-Anweisungen anzuwenden sind, entnehmen Sie bitte aus der Sparte: (Robots) weiter oben in diesem Artikel!

Mit den folgenden Robot-Anweisungen sprechen Sie den Googlebot an um dass indexieren von Bilddateien zu unterbinden:


(1.) User-agent: Googlebot-Image Disallow: /images/dogs.jpg

Mit dieser Anweisung können Sie ein oder mehrere Bilder die Sie nicht in der Suchmaschine sehen wollen entfernen bzw. nicht aufnehmen lassen.

(2.) User-agent: Googlebot-Image Disallow: /

Mit dieser Option geben Sie dem Googlebot die Anweisung alle Bilder die sich in diesem Verzeichnis befinden (Im Beispiel / - also die oberste Ebene, wenn ein Unterordner betroffen ist einfach den Ordnernamen hinter den Slash (/) anhängen, Bsp: /Ordnername) nicht in die Google-Bildersuche aufzunehmen.

(3.) User-agent: Googlebot-Image Disallow: /*.gif$


Zuletzt kann mit dieser Regel noch ein wenig enger bestimmt werden was ausgeschlossen werden soll oder nicht. Mit dieser Anweisung geben Sie dem Googlebot den Befehl alle Bilddateien die, die Dateiendung *.gif haben nicht zu indexieren, zum Beispiel *.jpg Dateien werden jedoch aufgenommen. Wichtig hierbei ist das Dollarzeichen am Ende der Anweisung, dieses drückt hierbei dass Ende des Dateinamens aus.




Info:

So jetzt aber genug mit Google und diesem kleinen Hilfetext, da meine Mutter am heutigen Tag Geburtstag hat werde ich mich wohl mal wieder in die Runde mit "einfügen". Weitere Vorschläge zu diesem Text sind über die untere Kommentar-Funktion gerne erwünscht! Achso für Fehler übernehme ich keine Haftung (da ich schon ein wenig Sekt Intus habe *gg*).