Verwenden von Noindex- und Nofollow-HTML-Metatags: So weisen Sie Google an, eine Seite in der Suche nicht zu indizieren

Quellknoten: 1135617

Die Indexierung möglichst vieler Seiten Ihrer Website kann für Vermarkter, die dies versuchen, sehr verlockend seinsteigern Sie ihre Suchmaschinenautorität.

Aber auch wenn es wahr ist, dass die Veröffentlichung weiterer Seiten, die für ein bestimmtes Keyword relevant sind (vorausgesetzt, sie sind auch von hoher Qualität), Ihr Ranking für dieses Keyword verbessert, ist es manchmal sogar sinnvoller, bestimmte Seiten auf Ihrer Website zu behalten des Index einer Suchmaschine.

… Sag was?!

Bleibt bei uns, Leute. In diesem Beitrag erfahren Sie, warum Sie möglicherweise bestimmte Webseiten aus den SERPs (Suchmaschinen-Ergebnisseiten) entfernen möchten und wie Sie dabei genau vorgehen.

Kostenlose Anleitung: So führen Sie ein technisches SEO-Audit durch

Deindexieren einer Seite von Google

Es gibt einige Gelegenheiten, in denen Sie eine Webseite – oder einen Teil einer Webseite – vom Crawling und der Indexierung durch Suchmaschinen ausschließen möchten, wie zum Beispiel:

  • ZuVerhindern Sie doppelte Inhalte (wenn es mehr als eine Version einer Seite gibt, die von den Suchmaschinen indiziert wird, z. B. bei einer druckerfreundlichen Version Ihres Inhalts) von der Indexierung
  • Um Admin- und Anmeldeseiten für den internen Gebrauch zu behandeln, es sei denn, sie sind für die Nutzung durch eine Community gedacht
  • Für einen Danke-Seite (d. h. die Seite, auf der ein Besucher landetKonvertierung auf einer Ihrer Zielseiten), bei der der Besucher Zugriff auf das auf der Zielseite versprochene Angebot erhält, beispielsweise einen Link zu einem E-Book-PDF

Dafür gibt es die DankesseiteUnser E-Book mit SEO-Tipps sieht zum Beispiel so aus:

Dankesseite für das HubSpot SEO Starter Pack

Sie möchten, dass jeder, der auf Ihren Dankesseiten landet, dorthin gelangt, weil er bereits ein Formular auf einer Zielseite ausgefüllt hat – nicht weil sie Ihre Dankesseite bei der Suche gefunden haben.

Warum nicht? Denn jeder, der Ihre Dankesseite bei der Suche findet, kann direkt auf Ihre Angebote zur Lead-Generierung zugreifen – ohne dass er Ihnen seine Informationen über Ihr Lead-Erfassungsformular mitteilen muss. Jeder Vermarkter, der es verstehtder Wert von Landingpages Wir wissen, wie wichtig es ist, diese Besucher zunächst als Leads zu gewinnen, bevor sie auf Ihre Angebote zugreifen können.

Bottom line: Wenn Ihre Dankesseiten über eine einfache Google-Suche leicht auffindbar sind, hinterlassen Sie möglicherweise wertvolle Leads auf dem Tisch.

Was noch schlimmer ist: Möglicherweise stellen Sie sogar fest, dass einige Ihrer Seiten mit dem höchsten Ranking für einige Ihrer Long-Tail-Keywords Ihre Dankesseiten sind – was bedeutet, dass Sie möglicherweise Hunderte potenzieller Leads einladen, Ihre Formulare zur Lead-Erfassung zu umgehen. Das ist ein ziemlich überzeugender Grund, warum Sie einige Ihrer Webseiten aus den SERPs entfernen möchten.

Wie gehen Sie also vor, um bestimmte Seiten von Suchmaschinen zu „deindexieren“? Hier sind drei Möglichkeiten, dies zu tun.

3 Möglichkeiten, eine Webseite von Suchmaschinen zu deindexieren

Robots.txt zur Deindizierung

Verwenden Sie diese Option, wenn Sie mehr Kontrolle darüber haben möchten, was Sie deindizieren, und über die erforderlichen technischen Ressourcen verfügen.

Eine Möglichkeit, eine Seite aus den Suchmaschinenergebnissen zu entfernen, besteht darin, Ihrer Website eine robots.txt-Datei hinzuzufügen. Der Vorteil dieser Methode besteht darin, dass Sie mehr Kontrolle darüber haben, was Bots indizieren dürfen. Das Ergebnis? Sie können unerwünschte Inhalte proaktiv aus den Suchergebnissen heraushalten.

In einer robots.txt-Datei können Sie angeben, ob Sie Bots von einer einzelnen Seite, einem ganzen Verzeichnis oder sogar nur einem einzelnen Bild oder einer einzelnen Datei blockieren möchten. Es besteht auch die Möglichkeit, das Crawlen Ihrer Website zu verhindern und gleichzeitig die Funktion von Google AdSense-Anzeigen zu ermöglichen, sofern vorhanden.

Allerdings erfordert diese von den beiden Optionen, die Ihnen zur Verfügung stehen, das technischste Kung-Fu. Um zu erfahren, wie man eine robots.txt-Datei erstellt, sollten Sie Folgendes tun lesen Sie sich diesen Artikel durch das erklärt genau, wie es geht..

HubSpot Kunden: Hier erfahren Sie, wie Sie eine robots.txt-Datei auf Ihrer Website installieren hierund erfahren Sie, wie Sie den Inhalt der Robots.txt-Datei anpassenhier.

Wenn Sie nicht die gesamte Kontrolle über eine robots.txt-Datei benötigen und nach einer einfacheren, weniger technischen Lösung suchen, dann ist diese zweite Option genau das Richtige für Sie.

Htaccess No Index No Follow to De-Index

Verwenden Sie diese Option, wenn Ihre Website unter Apache läuft und mod_headers aktiviert ist. Dies ist eine schnelle Lösung.

In diesem Fall könnten Sie diese einzelne Zeile an Ihre .htaccess-Datei anhängen:

Header-Set X-Robots-Tag „noindex, nofollow“

Dies bedeutet, dass Ihre Website indiziert werden kann, aber niemals in den Google-Suchergebnissen angezeigt wird.

Meta Kein Index, kein Follow zum Deindexieren

Verwenden Sie diese Option, wenn Sie eine einfachere Lösung zum Deindexieren einer gesamten Webseite und/oder zum Deindexieren der Links auf einer gesamten Webseite wünschen.

Die Verwendung eines Metatags, um zu verhindern, dass eine Seite in SERPs – und/oder den Links auf einer Seite – erscheint, ist sowohl einfach als auch effektiv. Es erfordert nur ein kleines bisschen technisches Know-how – tatsächlich ist es nur ein Kopier-/Einfügejob, wenn Sie das Richtige verwendenContent Management System.

Die Tags, mit denen Sie diese Dinge tun können, heißen „noindex“ und „nofollow“. Bevor ich mich damit befasse, wie man diese Tags hinzufügt, nehmen wir uns einen Moment Zeit, um die beiden zu definieren und zwischen ihnen zu unterscheiden. Schließlich handelt es sich um zwei völlig unterschiedliche Richtlinien – und sie können entweder einzeln oder nebeneinander verwendet werden.

Was ist ein „noindex“-Tag?

Wenn Sie einer Webseite ein „noindex“-Metatag hinzufügen, Es teilt einer Suchmaschine mit, dass sie die Seite zwar crawlen kann, sie aber nicht zu ihrem Suchindex hinzufügen kann.

Das gilt also für jede Seite mit der „noindex“-Direktive nicht gelangen in den Suchindex der Suchmaschine und können daher nicht auf den Ergebnisseiten der Suchmaschine angezeigt werden.

Was ist ein „nofollow“-Tag?

Wenn Sie einer Webseite ein „nofollow“-Metatag hinzufügen, Es verhindert, dass Suchmaschinen die Datei crawlen Links auf dieser Seite. Dies bedeutet auch, dass jede Ranking-Autorität, die die Seite in den SERPs hat, dies tun wird nicht an Seiten weitergegeben werden, auf die verlinkt wird.

Daher werden alle Links auf jeder Seite mit der „nofollow“-Anweisung von Google und anderen Suchmaschinen ignoriert.

Wie ich bereits sagte, können Sie eine „noindex“-Direktive entweder einzeln oder zusammen mit einer „nofollow“-Direktive hinzufügen. Sie können auch eine eigenständige „nofollow“-Anweisung hinzufügen.

Wann sollten „noindex“ und „nofollow“ getrennt verwendet werden?

Fügen Sie nur ein „noindex“-Tag hinzu wenn Sie nicht Sie möchten nicht, dass eine Suchmaschine Ihre Webseite indiziert, sondern Sie do möchten, dass es den Links auf dieser Seite folgt – und so den anderen Seiten, auf die Ihre Seite verlinkt, Ranking-Autorität verleiht.

Bezahlte Landingpages sind hierfür ein gutes Beispiel. Sie möchten nicht, dass Suchmaschinen Zielseiten indizieren, für deren Anzeige die Leute bezahlen sollen, aber vielleicht möchten Sie, dass die verlinkten Seiten von ihrer Autorität profitieren.

Fügen Sie nur ein „nofollow“-Tag hinzu wenn Sie do Sie möchten nicht, dass eine Suchmaschine Ihre Webseite indiziert, sondern Sie nicht möchte, dass es den Links auf dieser Seite folgt.

Es gibt nicht viele Beispiele dafür, dass Sie einer ganzen Seite ein „nofollow“-Tag hinzufügen würden, ohne auch ein „noindex“-Tag hinzuzufügen. Wenn Sie herausfinden, was auf einer bestimmten Seite zu tun ist, geht es eher darum, ob Sie Ihr „noindex“-Tag mit oder ohne „nofollow“-Tag hinzufügen.

Wann man „noindex, nofollow“ zusammen verwenden sollte

Fügen Sie sowohl ein „noindex“- als auch ein „nofollow“-Tag hinzu wenn Sie nicht Sie möchten, dass Suchmaschinen eine Webseite bei der Suche indizieren, und Sie möchten nicht, dass sie den Links auf dieser Seite folgt.

Dankesseiten sind ein gutes Beispiel für diese Situation. Sie möchten nicht, dass Suchmaschinen Ihre Dankesseite indizieren, und Sie möchten auch nicht, dass sie dem Link zu Ihrem Angebot folgen und mit der Indexierung des Inhalts dieses Angebots beginnen.

So fügen Sie einen „noindex“- und/oder „nofollow“-Metatag hinzu

Schritt 1: Kopieren Sie einen der folgenden Tags.

Für „noindex“:

Für „nofollow“:

Für „noindex“ und „nofollow“:

Schritt 2: Fügen Sie das Tag zum -Abschnitt des HTML-Codes Ihrer Seite hinzu, auch bekannt als Kopfzeile der Seite.

Wenn Sie ein HubSpot-Kunde sind, Das ist ganz einfach – klicken Sie hier oder scrollen Sie nach unten, um die spezifischen Anweisungen für HubSpot-Benutzer zu erhalten.

Wenn du bist nicht ein HubSpot-Kunde, Anschließend müssen Sie dieses Tag manuell in den Code auf Ihrer Webseite einfügen. Keine Sorge – es ist ziemlich einfach. So machen Sie es.

Öffnen Sie zunächst den Quellcode der Webseite, die Sie deindexieren möchten. Fügen Sie dann das vollständige Tag in eine neue Zeile im -Abschnitt des HTML-Codes Ihrer Seite ein, der als Seitenkopfzeile bezeichnet wird. Die Screenshots unten führen Sie durch den Vorgang.

Das -Tag kennzeichnet den Anfang Ihres Headers:

Head-Tag am Anfang des Headers

Hier ist das Metatag für „noindex“ und „nofollow“, das in den Header eingefügt wird:

Meta-Tag im Header für Noindex Nofollow

Und das -Tag kennzeichnet das Ende des Headers:

End-Head-Tag

Boom! Das ist es. Dieses Tag weist eine Suchmaschine an, sich umzudrehen und zu verschwinden, sodass die Seite nicht in den Suchergebnissen angezeigt wird.

Kein Index, kein Follow in HubSpot

Noch einfacher ist das Hinzufügen der Meta-Tags „noindex“ und „nofollow“. Sie müssen lediglich das HubSpot-Tool auf der Seite öffnen, zu der Sie diese Tags hinzufügen möchten, und die Registerkarte „Einstellungen“ auswählen.

Klicken Sie als Nächstes unter „Erweiterte Optionen“ auf „Head HTML“. Fügen Sie im Fenster unten den entsprechenden Codeausschnitt ein. Im folgenden Beispiel habe ich sowohl ein „noindex“- als auch ein „nofollow“-Tag hinzugefügt, da es sich um eine Dankesseite handelt.

Kein Index, kein Follow in Hubspot

Klicken Sie auf „Speichern“ und schon sind Sie goldrichtig.

Erfolgreich Kein Index Keine Folge einer Seite

Sie haben Ihre Seite gerade auf magische Weise aus den Suchmaschinenergebnissen gelöscht. Jetzt können Sie wieder mehr dieser verlorenen Leads erfassen.

Bedenken Sie jedoch, dass Sie nicht sofort Ergebnisse sehen werden. Ihre Änderungen werden erst wirksam, wenn eine Suchmaschine Ihre Seite das nächste Mal crawlt. Abhängig davon, wie oft Sie normalerweise neue Seiten auf Ihrer Website veröffentlichen, kann es tatsächlich einige Wochen dauern. Je häufiger Sie Inhalte veröffentlichen, desto häufiger crawlen Suchmaschinen Ihre Website. Der beste Weg, um zu verfolgen, wie oft Google Ihre Website besucht, besteht darin, Ihre Website zu untersuchenCrawl-Statistiken in Google Webmaster Tools.

Bottom line: Wenn Sie feststellen, dass Ihre Seite trotz des „noindex“-Tags immer noch in den Suchergebnissen von Google erscheint, liegt das wahrscheinlich daran, dass Google Ihre Website seit dem Hinzufügen des Tags nicht gecrawlt hat. Sie können Google auffordern, Ihre Seite erneut zu crawlen Abrufen als Google-Tool.

Beachten Sie außerdem, dass die Webcrawler einiger Suchmaschinen diese Anweisungen möglicherweise anders interpretieren als Google, sodass Ihre Seite möglicherweise weiterhin in den Ergebnissen anderer Suchmaschinen angezeigt wird. Aber für Google wird es einwandfrei funktionieren – sobald es dazu kommt, Ihre Website zu crawlen.

Unabhängig davon können Sie etwas ruhiger schlafen, wenn Sie wissen, dass Sie Ihre Website letztendlich zu einem besseren Ort für Ihr Marketing gemacht haben.

Anmerkung der Redaktion: Dieser Artikel wurde ursprünglich im Juli 2016 veröffentlicht und wurde aus Gründen der Vollständigkeit aktualisiert.

SEO-Audit


Quelle: https://blog.hubspot.com/marketing/how-to-unindex-pages-from-search-engines

Zeitstempel:

Mehr von Marketing