Using Noindex, Nofollow HTML Metatags: How To Tell Google Not To Index A Page In Search

הועלה מחדש על ידי אפלטון

עוקב: 0

הוספה לאינדקס של כמה שיותר דפים באתר שלך יכולה להיות מפתה מאוד עבור משווקים שמנסים לעשות זאתלהגביר את סמכות מנוע החיפוש שלהם.

אבל, אמנם זה נכון שפרסום דפים נוספים שרלוונטיים למילת מפתח מסוימת (בהנחה שהם גם איכותיים) ישפר את הדירוג שלך עבור אותה מילת מפתח, לפעמים יש יותר ערך בשמירה על דפים מסוימים באתר שלך הַחוּצָה של אינדקס של מנוע חיפוש.

… Say what?!

הישארו איתנו, אנשים. פוסט זה ידריך אותך מדוע ייתכן שתרצה להסיר דפי אינטרנט מסוימים מ-SERPs (דפי תוצאות של מנועי חיפוש), וכיצד בדיוק לעשות זאת.

ביטול האינדקס של דף מגוגל

יש כמה מקרים שבהם ייתכן שתרצה לא לכלול דף אינטרנט - או חלק מדף אינטרנט - מסריקה והוספה לאינדקס של מנוע חיפוש, כגון:

ללמנוע תוכן כפול (כאשר יש יותר מגרסה אחת של דף שנוספה לאינדקס על ידי מנועי החיפוש, כמו בגרסה ידידותית למדפסת של התוכן שלך) לאינדקס
לטפל בדפי ניהול וכניסה לשימוש פנימי אלא אם כן הם מיועדים לשימוש על ידי קהילה
עבור דף תודה (כלומר, הדף שאחריו נוחת מבקרהמרה באחד מדפי הנחיתה שלך) שבו המבקר מקבל גישה לכל הצעה שדף הנחיתה הבטיח, כגון קישור ל-PDF של ספר אלקטרוני

Here’s what the thank-you page forספר אלקטרוני של עצות SEO שלנו נראה כמו למשל:

You want anyone who lands on your thank-you pages to get there because they’ve already filled out a form on a landing page — לֹא כי הם מצאו את דף התודה שלך בחיפוש.

למה לא? מכיוון שכל מי שמוצא את דף התודה שלך בחיפוש יכול לגשת ישירות להצעות לייצור הלידים שלך - מבלי שיצטרך לספק לך את המידע שלו כדי לעבור דרך טופס לכידת הלידים שלך. כל משווק שמביןהערך של דפי נחיתה מבין כמה חשוב ללכוד את המבקרים האלה בתור לידים תחילה, לפני שהם יכולים לגשת להצעות שלך.

בשורה תחתונה: אם דפי התודה שלך ניתנים לגילוי בקלות באמצעות חיפוש פשוט בגוגל, ייתכן שאתה משאיר לידים חשובים על השולחן.

What’s worse, you may even find that some of your highest-ranking pages for some of your long-tail keywords might be your thank-you pages — which means you could be inviting hundreds of potential leads to bypass your lead-capture forms. That’s a pretty compelling reason why you’d want to remove some of your web pages from SERPs.

So, how do you go about “de-indexing” certain pages from search engines? Here are three ways to do it.

3 דרכים להסיר את האינדקס של דף אינטרנט ממנועי חיפוש

Robots.txt ל-De-Index

השתמש אם: אתה רוצה יותר שליטה על מה שאתה מבטל את האינדקס, ויש לך את המשאבים הטכניים הדרושים.

דרך אחת להסיר דף מתוצאות מנוע החיפוש היא על ידי הוספת קובץ robots.txt לאתר שלך. היתרון בשימוש בשיטה זו הוא שאתה יכול לקבל יותר שליטה על מה שאתה מאפשר לבוטים לאינדקס. התוצאה? אתה יכול להרחיק באופן יזום תוכן לא רצוי מתוצאות החיפוש.

בתוך קובץ robots.txt, אתה יכול לציין אם תרצה לחסום בוטים מדף בודד, ספרייה שלמה, או אפילו רק תמונה או קובץ בודדים. ישנה גם אפשרות למנוע את סריקת האתר שלך תוך כדי הפעלת מודעות Google AdSense אם יש לך אותן.

That being said, of the two options available to you, this one requires the most technical kung fu. To learn how to create a robots.txt file, you’ll want to לקרוא את המאמר הזה שמסביר בדיוק איך לעשות את זה..

לקוחות HubSpot: תוכל ללמוד כיצד להתקין קובץ robots.txt באתר האינטרנט שלך כאן, ולמד כיצד להתאים אישית את התוכן של קובץ Robots.txtכאן.

אם אינך זקוק לכל השליטה של קובץ robots.txt ומחפש פתרון קל יותר ופחות טכני, אז האפשרות השנייה הזו היא בשבילך.

Htaccess ללא אינדקס ללא מעקב לביטול האינדקס

השתמש אם: האתר שלך פועל על Apache, ו-mod_headers מופעל, זהו פתרון מהיר.

בנסיבות אלה, תוכל לצרף שורה בודדת זו לקובץ ה-.htaccess שלך:

Header set X-Robots-Tag “noindex, nofollow”

כדי לציין שניתן להוסיף את האתר שלך לאינדקס, אך לעולם לא להופיע בתוצאות החיפוש של Google.

Meta No Index ללא מעקב ל-De-Index

השתמש אם: אתה רוצה פתרון קל יותר לביטול אינדקס של דף אינטרנט שלם, ו/או ביטול אינדקס של הקישורים בדף אינטרנט שלם.

Using a metatag to prevent a page from appearing in SERPs — and/or the links on a page — is both easy and effective. It requires only a tiny bit of technical know-how — in fact, it’s really just a copy/paste job if you’re using the rightמערכת ניהול תוכן.

The tags that let you do these things are called “noindex” and “nofollow.” Before I get into how to add these tags, let’s take a moment to define and distinguish between the two. They are, after all, two completely different directives — and they can be used either on their own, or alongside one another.

What is a “noindex” tag?

When you add a “noindex” metatag to a webpage, הוא אומר למנוע חיפוש שלמרות שהוא יכול לסרוק את הדף, הוא לא יכול להוסיף את הדף לאינדקס החיפוש שלו.

So any page with the “noindex” directive on it will לֹא go into the search engine’s search index, and can therefore not be shown in search engine results pages.

What is a “nofollow” tag?

When you add a “nofollow” metatag to a webpage, זה מונע למנועי חיפוש לסרוק את קישורים בדף זה. זה גם אומר שכל סמכות דירוג שיש לדף ב-SERP תהיה לֹא יועבר לדפים אליהם הוא מקשר.

So any page with a “nofollow” directive on it will have all its links ignored by Google and other search engines.

Like I said before, you can add a “noindex” directive either on its own, or together with a “nofollow” directive. You can also add a “nofollow” directive on its own, too.

מתי להשתמש ב-"noindex" ו-"nofollow" בנפרד

Add only a “noindex” tag כאשר אתה לא רוצה שמנוע חיפוש יוסיף לאינדקס את דף האינטרנט שלך בחיפוש, אבל אתה do רוצה שהוא יעקוב אחר הקישורים בדף זה - ובכך יעניק סמכות דירוג לדפים האחרים שהדף שלך מקשר אליהם.

Paid landing pages are a great example of this. You don’t want search engines to index landing pages that people are supposed to pay to see, but you might want the pages it links to benefit from its authority.

Add only a “nofollow” tag כאשר אתה do רוצה שמנוע חיפוש יוסיף לאינדקס את דף האינטרנט שלך בחיפוש, אבל אתה לא רוצה שהוא יעקוב אחר הקישורים בדף זה.

There aren’t too many examples of when you’d add a “nofollow” tag to a whole page without also adding a “noindex” tag. When you’re figuring out what to do on a given page, it’s more a question of whether to add your “noindex” tag with or without a “nofollow” tag.

מתי להשתמש ב-"noindex, nofollow" ביחד

Add both a “noindex” and “nofollow” tag כאשר אתה לא want search engines to index a webpage in search, and you don’t want it to follow the links on that page.

Thank-you pages are a great example of this situation. You don’t want search engines to index your thank-you page, nor do you want them to follow the link to your offer and start indexing the content of that offer, either.

How to Add a “noindex” and/or a “nofollow” Metatag

שלב 1: העתק אחד מהתגים הבאים.

For “noindex”:

For “nofollow”:

For both “noindex” and “nofollow”:

שלב 2: Add the tag to the <head> section of your page’s HTML, a.k.a. the page’s header.

אם אתה לקוח של HubSpot, זה סופר קל - לחץ כאן או גלול מטה לקבלת ההוראות הספציפיות למשתמשי HubSpot.

אם אתה לֹא לקוח HubSpot, then you’ll have to paste this tag into the code on your webpage manually. Don’t worry — it’s pretty simple. Here’s how you do it.

First, open the source code of the web page you’re trying to de-index. Then, paste the full tag into a new line within the <head> section of your page’s HTML, known as the page’s header. The screenshots below will walk you through it.

ה תג מסמל את תחילת הכותרת שלך:

Here’s the metatag for both “noindex” and “nofollow” pasted within the header:

וה תג מסמל את סוף הכותרת:

בּוּם! זהו זה. תג זה אומר למנוע חיפוש להסתובב וללכת, ומשאיר את הדף מחוץ לתוצאות החיפוש.

אין אינדקס אין מעקב ב- HubSpot

Adding the “noindex” and “nofollow” meta tags is even easier. All you have to do is open the HubSpot tool to the page you want to add these tags to and choose the “Settings” tab.

Next, under Advanced Options and click into “Head HTML.” In the window below, paste the appropriate code snippet. In the example below, I’ve added both a “noindex” and a “nofollow” tag since it’s a thank-you page.

Press “Save,” and you’re golden.

בהצלחה ללא אינדקס ללא מעקב אחר דף

פשוט מחקת באורח קסם את הדף שלך מתוצאות מנוע החיפוש. עכשיו, אתה יכול להתחיל ללכוד עוד מהלידים שאבדו שוב.

Now, keep in mind that you won’t see results instantaneously. Your changes won’t kick in until the next time a search engine crawls your page. Depending on how often you typically publish new pages on your website, it actually could take a few weeks. The more frequently you publish content, the more often search engines will crawl your site. The best way to keep track of how frequently Google visits your website is to examine yourסטטיסטיקות סריקה in Google Webmaster Tools.

בשורה תחתונה: If you notice that your page is still appearing in Google’s search results even with the “noindex” tag, it’s probably because Google hasn’t crawled your site since you added the tag. אתה יכול לבקש מ-Google לסרוק מחדש את הדף שלך באמצעות ה כלי אחזור כגוגל.

Also, note that some search engines’ web crawlers might interpret these directives differently than Google does, so your page might still appear in results from other search engines. But for Google, it’ll work just fine — once it does get around to crawling your website.

Regardless, you’ll be able to sleep a little easier knowing you’ve ultimately made your website a better place for your marketing.

הערת העורך: מאמר זה פורסם במקור ביולי 2016 ועודכן לצורך מקיפות.