Datenbanken Software eBooks Web CMS » robots.txt http://www.susss.at Christian Suschegg => Datenbank-Architekt * Software-Entwickler * E-Book-Autor * Web-Redakteur Thu, 01 Nov 2012 15:54:36 +0000 de-DE hourly 1 https://wordpress.org/?v=4.2.39 Einstellungen in der robots.txt http://www.susss.at/2010/04/19/einstellungen-in-der-robots-txt/ http://www.susss.at/2010/04/19/einstellungen-in-der-robots-txt/#comments Mon, 19 Apr 2010 09:52:06 +0000 http://www.susss.at/?p=102 Mit der Datei robots.txt kann man Suchmaschinen mitteilen, ob und wo sie suchen dürfen – Siehe hierzu auch den Wikipedia-Artikel.

Für den einfachsten Fall, dass man alle Suchmaschinen auf alle Verzeichnisse und Dateien loslassen möchte, schreibt man ganz einfach:

User-Agent: *
Disallow:

Bei der Umsiedelung meines Webspaces zu einem neuen Hosting-Provider wollte ich auch gleich die Entwicklungstechnologie mitändern. Weil ich den benötigten Zeithorizont nicht ausreichend überblicken konnte, habe ich 2 Domains verwendet. Große Inhaltsteile waren auf beiden Adressen erreichbar.

Es hat dann leider nicht allzu lange gedauert, und Google muß diese Inhalte wohl als „Duplicate Content“ identifziert haben. Meine indizierten Seiten nahmen in den Google Webmaster Tools recht schnell von fast 4.000 Seiten auf knapp 600 Seiten ab.

Zwar erholte sich das Ergebnis einige Tage später wieder über 3.000 Seiten, aber da ich sicher noch länger mit der Umstellung doppelt fahren würde, habe ich Google durch folgenden robots.txt-Eintrag mitgeteilt, dass auf den alten Seiten nicht mehr gesucht werden darf.

User-Agent: *
Disallow: /unterverzeichnis/seiten_auf_alter_domain/

]]> http://www.susss.at/2010/04/19/einstellungen-in-der-robots-txt/feed/ 0 Suchmaschinenoptimierung – Basisarbeiten http://www.susss.at/2010/04/19/suchmaschinenoptimierung-basisarbeiten/ http://www.susss.at/2010/04/19/suchmaschinenoptimierung-basisarbeiten/#comments Mon, 19 Apr 2010 09:47:59 +0000 http://www.susss.at/?p=100 Unabhängig von den Optimierungstipps bei der Gestaltung der einzelnen Wegseiten gibt es auch eine Reihe von Basisarbeiten zum besseren Ranking in Suchmaschinen, allen voran natürlich Google.

Die folgenden Punkte sind dabei als Checkliste zu verstehen:

Was es unbedingt zu vermeiden gilt, ist Duplicate Content (Informationen zur Verhinderung tun).

]]> http://www.susss.at/2010/04/19/suchmaschinenoptimierung-basisarbeiten/feed/ 0