Menggunakan Noindex, Metatag HTML Nofollow: Bagaimana Memberitahu Google untuk Tidak Mengindeks Halaman di Pencarian

Mengindeks sebanyak mungkin halaman di situs web Anda bisa sangat menggoda bagi pemasar yang mencobanyameningkatkan otoritas mesin pencari mereka.

Namun, meskipun benar bahwa menerbitkan lebih banyak halaman yang relevan dengan kata kunci tertentu (dengan asumsi halaman tersebut juga berkualitas tinggi) akan meningkatkan peringkat Anda untuk kata kunci tersebut, terkadang sebenarnya ada manfaat lebih dalam mempertahankan halaman tertentu di situs web Anda. di luar dari indeks mesin pencari.

… Say what?!

Tetaplah bersama kami, teman-teman. Posting ini akan memandu Anda mengapa Anda mungkin ingin menghapus halaman web tertentu dari SERP (halaman hasil mesin pencari), dan bagaimana cara melakukannya.

Menghapus Pengindeksan Halaman dari Google

Ada beberapa saat di mana Anda mungkin ingin mengecualikan laman web — atau sebagian laman web — dari perayapan dan pengindeksan mesin telusur seperti:

• Untukmencegah duplikat konten (bila ada lebih dari satu versi halaman yang diindeks oleh mesin pencari, seperti dalam versi konten Anda yang ramah printer) tidak diindeks
• Untuk memperlakukan halaman admin dan login untuk penggunaan internal kecuali halaman tersebut dimaksudkan untuk digunakan oleh komunitas
• Untuk halaman terima kasih (yaitu, halaman yang dibuka pengunjung setelahnyamengonversi di salah satu halaman arahan Anda) di mana pengunjung mendapat akses ke penawaran apa pun yang dijanjikan laman landas, seperti tautan ke eBook PDF

Here’s what the thank-you page forebook tips SEO kami terlihat seperti, misalnya:

You want anyone who lands on your thank-you pages to get there because they’ve already filled out a form on a landing page — tidak karena mereka menemukan halaman terima kasih Anda dalam pencarian.

Mengapa tidak? Karena siapa pun yang menemukan halaman terima kasih Anda di penelusuran dapat mengakses penawaran penghasil prospek Anda secara langsung — tanpa harus memberi Anda informasi mereka untuk melewati formulir pengambilan prospek. Setiap pemasar yang mengertinilai halaman arahan memahami betapa pentingnya menjaring pengunjung tersebut sebagai prospek terlebih dahulu, sebelum mereka dapat mengakses penawaran Anda.

Intinya: Jika halaman ucapan terima kasih Anda mudah ditemukan melalui pencarian Google sederhana, Anda mungkin meninggalkan petunjuk berharga.

What’s worse, you may even find that some of your highest-ranking pages for some of your long-tail keywords might be your thank-you pages — which means you could be inviting hundreds of potential leads to bypass your lead-capture forms. That’s a pretty compelling reason why you’d want to remove some of your web pages from SERPs.

So, how do you go about “de-indexing” certain pages from search engines? Here are three ways to do it.

3 Cara Menghapus Indeks Halaman Web Dari Mesin Pencari

Robots.txt untuk De-Indeks

Gunakan jika: Anda ingin kontrol lebih besar atas apa yang Anda hapus indeksnya, dan Anda memiliki sumber daya teknis yang diperlukan.

Salah satu cara untuk menghapus halaman dari hasil mesin pencari adalah dengan menambahkan file robots.txt ke situs Anda. Keuntungan menggunakan metode ini adalah Anda bisa mendapatkan kontrol lebih besar atas apa yang Anda izinkan untuk diindeks oleh bot. Hasil? Anda dapat secara proaktif menjauhkan konten yang tidak diinginkan dari hasil pencarian.

Dalam file robots.txt, Anda dapat menentukan apakah Anda ingin memblokir bot dari satu halaman, seluruh direktori, atau bahkan hanya satu gambar atau file. Ada juga opsi untuk mencegah situs Anda dirayapi sambil tetap mengaktifkan iklan Google AdSense agar berfungsi jika Anda memilikinya.

That being said, of the two options available to you, this one requires the most technical kung fu. To learn how to create a robots.txt file, you’ll want to membaca artikel ini itu menjelaskan dengan tepat bagaimana melakukannya..

Pelanggan HubSpot: Anda dapat mempelajari cara memasang file robots.txt di situs web Anda di sini, dan pelajari cara menyesuaikan konten file Robots.txtdi sini.

Jika Anda tidak memerlukan semua kendali atas file robots.txt dan mencari solusi yang lebih mudah dan tidak terlalu teknis, opsi kedua ini cocok untuk Anda.

Htaccess Tanpa Indeks Tanpa Ikuti De-Index

Gunakan jika: Situs web Anda berjalan di Apache, dan mod_headers diaktifkan, ini adalah solusi cepat.

Dalam keadaan ini, Anda dapat melampirkan satu baris ini ke file .htaccess Anda:

Header set X-Robots-Tag “noindex, nofollow”

Untuk menandakan bahwa website Anda dapat diindeks, namun tidak pernah ditampilkan di hasil pencarian Google mana pun.

Meta Tanpa Indeks Tanpa Ikuti De-Indeks

Gunakan jika: Anda menginginkan solusi yang lebih mudah untuk membatalkan pengindeksan seluruh halaman web, dan/atau menghapus indeks tautan di seluruh halaman web.

Using a metatag to prevent a page from appearing in SERPs — and/or the links on a page — is both easy and effective. It requires only a tiny bit of technical know-how — in fact, it’s really just a copy/paste job if you’re using the rightsistem manajemen konten.

The tags that let you do these things are called “noindex” and “nofollow.” Before I get into how to add these tags, let’s take a moment to define and distinguish between the two. They are, after all, two completely different directives — and they can be used either on their own, or alongside one another.

What is a “noindex” tag?

When you add a “noindex” metatag to a webpage, ia memberi tahu mesin pencari bahwa meskipun ia dapat merayapi halaman tersebut, ia tidak dapat menambahkan halaman tersebut ke dalam indeks pencariannya.

So any page with the “noindex” directive on it will tidak go into the search engine’s search index, and can therefore not be shown in search engine results pages.

What is a “nofollow” tag?

When you add a “nofollow” metatag to a webpage, itu melarang mesin pencari merayapi link di halaman itu. Ini juga berarti bahwa otoritas peringkat apa pun yang dimiliki halaman tersebut di SERP akan melakukannya tidak diteruskan ke halaman yang ditautkannya.

So any page with a “nofollow” directive on it will have all its links ignored by Google and other search engines.

Like I said before, you can add a “noindex” directive either on its own, or together with a “nofollow” directive. You can also add a “nofollow” directive on its own, too.

Kapan Menggunakan “noindex” dan “nofollow” Secara Terpisah

Add only a “noindex” tag ketika Anda tidak ingin mesin pencari mengindeks halaman web Anda dalam pencarian, tetapi Anda do ingin agar halaman tersebut mengikuti link di halaman tersebut — sehingga memberikan otoritas peringkat ke halaman lain yang ditautkan ke halaman Anda.

Paid landing pages are a great example of this. You don’t want search engines to index landing pages that people are supposed to pay to see, but you might want the pages it links to benefit from its authority.

Add only a “nofollow” tag ketika Anda do ingin mesin pencari mengindeks halaman web Anda dalam pencarian, tetapi Anda tidak ingin mengikuti tautan di halaman itu.

There aren’t too many examples of when you’d add a “nofollow” tag to a whole page without also adding a “noindex” tag. When you’re figuring out what to do on a given page, it’s more a question of whether to add your “noindex” tag with or without a “nofollow” tag.

Kapan Menggunakan “noindex, nofollow” Bersamaan

Add both a “noindex” and “nofollow” tag ketika Anda tidak want search engines to index a webpage in search, and you don’t want it to follow the links on that page.

Thank-you pages are a great example of this situation. You don’t want search engines to index your thank-you page, nor do you want them to follow the link to your offer and start indexing the content of that offer, either.

How to Add a “noindex” and/or a “nofollow” Metatag

Langkah 1: Salin salah satu tag berikut.

For “noindex”:

<META NAME=”robots” CONTENT=”noindex”>

For “nofollow”:

<META NAME=”robots” CONTENT=”nofollow”>

For both “noindex” and “nofollow”:

<META NAME=”robots” CONTENT=”noindex,nofollow”>

Langkah 2: Add the tag to the <head> section of your page’s HTML, a.k.a. the page’s header.

Jika Anda adalah pelanggan HubSpot, ini sangat mudah — klik di sini atau gulir ke bawah untuk melihat petunjuk khusus untuk pengguna HubSpot.

Jika kamu tidak pelanggan HubSpot, then you’ll have to paste this tag into the code on your webpage manually. Don’t worry — it’s pretty simple. Here’s how you do it.

First, open the source code of the web page you’re trying to de-index. Then, paste the full tag into a new line within the <head> section of your page’s HTML, known as the page’s header. The screenshots below will walk you through it.

Itu tag menandakan awal header Anda:

Here’s the metatag for both “noindex” and “nofollow” pasted within the header:

Dan itu tag menandakan akhir dari header:

Ledakan! Itu dia. Tag ini memberitahu mesin pencari untuk berbalik dan pergi, meninggalkan halaman tersebut dari hasil pencarian apa pun.

Tidak Ada Indeks Tidak Ada Ikuti di HubSpot

Adding the “noindex” and “nofollow” meta tags is even easier. All you have to do is open the HubSpot tool to the page you want to add these tags to and choose the “Settings” tab.

Next, under Advanced Options and click into “Head HTML.” In the window below, paste the appropriate code snippet. In the example below, I’ve added both a “noindex” and a “nofollow” tag since it’s a thank-you page.

Press “Save,” and you’re golden.

Berhasil Tidak Ada Indeks Tidak Ada Halaman yang Mengikuti

Anda baru saja secara ajaib menghapus halaman Anda dari hasil mesin pencari. Sekarang, Anda dapat mulai menangkap lebih banyak lagi prospek yang hilang tersebut.

Now, keep in mind that you won’t see results instantaneously. Your changes won’t kick in until the next time a search engine crawls your page. Depending on how often you typically publish new pages on your website, it actually could take a few weeks. The more frequently you publish content, the more often search engines will crawl your site. The best way to keep track of how frequently Google visits your website is to examine yourstatistik perayapan in Google Webmaster Tools.

Intinya: If you notice that your page is still appearing in Google’s search results even with the “noindex” tag, it’s probably because Google hasn’t crawled your site since you added the tag. Anda dapat meminta Google merayapi ulang laman Anda menggunakan Ambil sebagai alat Google.

Also, note that some search engines’ web crawlers might interpret these directives differently than Google does, so your page might still appear in results from other search engines. But for Google, it’ll work just fine — once it does get around to crawling your website.

Regardless, you’ll be able to sleep a little easier knowing you’ve ultimately made your website a better place for your marketing.

Catatan editor: Artikel ini awalnya diterbitkan Juli 2016 dan telah diperbarui untuk kelengkapan.

Sumber: https://blog.hubspot.com/marketing/how-to-unindex-pages-from-search-engines