Duplicate Content ist für Google ein KO-Kriterium, wer davon zu viel auf seiner Website hat, wird Schwierigkeiten haben, vernünftig zu ranken. Das Thema spielt bei der Suchmaschinenoptimierung (siehe auch: http://www.metamove.de/) eine große Rolle. Wichtig ist darauf zu achten, dass ein un derselbe Text möglichst nur ein einziges Mal im World Wide Web auftaucht. Das gilt sowohl im Vergleich zweier Domains als auch innerhalb einer Domain. Wie kann Duplicate Content vermieden werden? Es gibt verschiedene Wege für SEOs, genau dies zu unterbinden.
Einzigartige Texte = Unique Content
Nicht nur urheberrechtlichen Gründen sollten Texte nicht einfach mit STRG+C und STRG+V von fremden Websites übernommen werden, sondern jeweils als Unikat erstellt werden. Das gilt auch für Produktbeschreibungen in Shops. Wer einfach den Text des Herstellers kopiert, wird damit nicht gut ranken.
Das noindex Attribut
Im Bereich einer Website kann dem Crawler gesagt werden, dass er diese Seite nicht in den Index aufnehmen soll. Idealerweise lässt der SEO den Crawler weiterhin jedoch alle Links der Website verfolgen, damit die verlinkten Seiten in den Index aufgenommen werden können Voraussetzung dafür ist, dass die Links ihrerseits nicht mit dem Attribut „nofollow“ versehen sind.
Ausschluss in der robots.txt
Die robots.txt ist eine Textdatei, welche im Root-Verzeichnis abgelegt wird. Dort sind für verschiedene Crawler die Anweisungen festgelegt. Mit Disallow kann eine komplette Website, ein Unterverzeichnis oder jeweils einzelne Seiten von der Indexierung ausgeschlossen werden. In dem Fall landet die Seite trotzdem im Index, jedoch wird der Inhalt nicht indexiert. Es werden keine Meta-Tags ausgelesen, so dass einfach nur eine URL als Suchergebnis erscheint. Daher ist die erste Variante häufig die bessere Entscheidung.
Canonical URL
Das Canonical-Tag ist noch relativ neu und dafür geeignet, wenn eine Inhaltsseite häufiger auf der Website auftaucht und trotzdem nicht komplett ausgeschlossen werden soll. Eine Preisübersicht kann nach Preis, Versandkosten und Bewertung sortiert werden. Häufig sind es dann auch drei verschiedene URLs mit jeweils dem gleichen Inhalt. Per Canonical URL kann jede Website auf die originale Seite verweisen. In diesem Fall wertet Google es nicht als Duplicate Content und nimmt nur die Originalseite in den Index auf.
Durch ordentliche Suchmaschinenoptimierung, sollten Probleme mit doppelten Inhalten ausgeschlossen werden. Ein SEO Experte kann praktische Tipps geben und die Bremsen entfernen. Google würde diese Funktionen nicht anbieten, wenn es keinen Mehrwert bieten würde.
Aber es stellt sich natürlich die Frage, wie um alles in der Welt soll Google es schaffen jeden Content im Internet untereinander zu vergleichen? Das ist doch rein rechnerisch vom Aufwand nicht mit Software machbar?