Usando metatags HTML Noindex e Nofollow: como dizer ao Google para não indexar uma página na pesquisa

Indexar o maior número possível de páginas do seu site pode ser muito tentador para profissionais de marketing que estão tentandoaumentar sua autoridade no mecanismo de pesquisa.

Mas, embora seja verdade que publicar mais páginas relevantes para uma palavra-chave específica (assumindo que também sejam de alta qualidade) melhorará sua classificação para essa palavra-chave, às vezes há mais valor em manter certas páginas em seu site Fora do índice de um mecanismo de pesquisa.

… Say what?!

Fiquem conosco, pessoal. Esta postagem explicará por que você pode querer remover certas páginas da web das SERPs (páginas de resultados de mecanismos de pesquisa) e exatamente como fazer isso.

Desindexando uma página do Google

Existem algumas ocasiões em que você pode querer excluir uma página da web – ou parte de uma página da web – do rastreamento e indexação do mecanismo de pesquisa, como:

• Paraevitar conteúdo duplicado (quando há mais de uma versão de uma página indexada pelos motores de busca, como em uma versão do seu conteúdo para impressão) seja indexada
• Para tratar páginas de administração e login para uso interno, a menos que sejam destinadas a uso por uma comunidade
• Para uma página de agradecimento (ou seja, a página que um visitante acessa depoisconvertendo em uma de suas páginas de destino) onde o visitante obtém acesso a qualquer oferta prometida pela página de destino, como um link para um e-book em PDF

Here’s what the thank-you page fornosso e-book de dicas de SEO parece, por exemplo:

You want anyone who lands on your thank-you pages to get there because they’ve already filled out a form on a landing page — não porque encontraram sua página de agradecimento na pesquisa.

Por que não? Porque qualquer pessoa que encontrar sua página de agradecimento na pesquisa pode acessar diretamente suas ofertas de geração de leads - sem ter que fornecer suas informações para passar pelo formulário de captura de leads. Qualquer profissional de marketing que entendao valor das páginas de destino entende como é importante capturar esses visitantes como leads primeiro, antes que eles possam acessar suas ofertas.

Bottom line: Se suas páginas de agradecimento forem facilmente descobertas por meio de uma simples pesquisa no Google, você pode estar deixando pistas valiosas na mesa.

What’s worse, you may even find that some of your highest-ranking pages for some of your long-tail keywords might be your thank-you pages — which means you could be inviting hundreds of potential leads to bypass your lead-capture forms. That’s a pretty compelling reason why you’d want to remove some of your web pages from SERPs.

So, how do you go about “de-indexing” certain pages from search engines? Here are three ways to do it.

3 maneiras de desindexar uma página da web dos mecanismos de pesquisa

Robots.txt para desindexar

Use se: você deseja mais controle sobre o que desindexa e possui os recursos técnicos necessários.

Uma maneira de remover uma página dos resultados do mecanismo de pesquisa é adicionar um arquivo robots.txt ao seu site. A vantagem de usar esse método é que você pode obter mais controle sobre o que está permitindo que os bots indexem. O resultado? Você pode manter proativamente o conteúdo indesejado fora dos resultados da pesquisa.

Dentro de um arquivo robots.txt, você pode especificar se deseja bloquear bots de uma única página, de um diretório inteiro ou até mesmo de uma única imagem ou arquivo. Também existe uma opção para impedir que seu site seja rastreado e, ao mesmo tempo, permitir que os anúncios do Google AdSense funcionem, caso você os tenha.

That being said, of the two options available to you, this one requires the most technical kung fu. To learn how to create a robots.txt file, you’ll want to leia este artigo isso explica exatamente como fazer isso..

Clientes HubSpot: Você pode aprender como instalar um arquivo robots.txt em seu site SUA PARTICIPAÇÃO FAZ A DIFERENÇAe aprenda como personalizar o conteúdo do arquivo Robots.txtSUA PARTICIPAÇÃO FAZ A DIFERENÇA.

Se você não precisa de todo o controle de um arquivo robots.txt e está procurando uma solução mais fácil e menos técnica, então esta segunda opção é para você.

Htaccess sem índice, sem seguir para desindexar

Use se: Seu site estiver rodando em Apache e mod_headers estiver habilitado, esta é uma solução rápida.

Nessa circunstância, você poderia anexar esta única linha ao seu arquivo .htaccess:

Header set X-Robots-Tag “noindex, nofollow”

Para significar que seu site pode ser indexado, mas nunca mostrado em nenhum resultado de pesquisa do Google.

Meta No Index Não Segue para Desindexar

Use se: você deseja uma solução mais fácil para desindexar uma página da web inteira e/ou desindexar os links de uma página da web inteira.

Using a metatag to prevent a page from appearing in SERPs — and/or the links on a page — is both easy and effective. It requires only a tiny bit of technical know-how — in fact, it’s really just a copy/paste job if you’re using the rightsistema de gerenciamento de conteúdo.

The tags that let you do these things are called “noindex” and “nofollow.” Before I get into how to add these tags, let’s take a moment to define and distinguish between the two. They are, after all, two completely different directives — and they can be used either on their own, or alongside one another.

What is a “noindex” tag?

When you add a “noindex” metatag to a webpage, ele informa ao mecanismo de pesquisa que, embora possa rastrear a página, ele não pode adicioná-la ao índice de pesquisa.

So any page with the “noindex” directive on it will não go into the search engine’s search index, and can therefore not be shown in search engine results pages.

What is a “nofollow” tag?

When you add a “nofollow” metatag to a webpage, ele impede que os mecanismos de pesquisa rastreiem o Links nessa página. Isso também significa que qualquer autoridade de classificação que a página tenha nas SERPs não ser repassado às páginas às quais ele está vinculado.

So any page with a “nofollow” directive on it will have all its links ignored by Google and other search engines.

Like I said before, you can add a “noindex” directive either on its own, or together with a “nofollow” directive. You can also add a “nofollow” directive on its own, too.

Quando usar “noindex” e “nofollow” separadamente

Add only a “noindex” tag quando você não deseja que um mecanismo de pesquisa indexe sua página da web na pesquisa, mas você do deseja que ele siga os links dessa página - dando assim autoridade de classificação às outras páginas às quais sua página está vinculada.

Paid landing pages are a great example of this. You don’t want search engines to index landing pages that people are supposed to pay to see, but you might want the pages it links to benefit from its authority.

Add only a “nofollow” tag quando você do deseja que um mecanismo de pesquisa indexe sua página da web na pesquisa, mas você não deseja que ele siga os links dessa página.

There aren’t too many examples of when you’d add a “nofollow” tag to a whole page without also adding a “noindex” tag. When you’re figuring out what to do on a given page, it’s more a question of whether to add your “noindex” tag with or without a “nofollow” tag.

Quando usar “noindex, nofollow” juntos

Add both a “noindex” and “nofollow” tag quando você não want search engines to index a webpage in search, and you don’t want it to follow the links on that page.

Thank-you pages are a great example of this situation. You don’t want search engines to index your thank-you page, nor do you want them to follow the link to your offer and start indexing the content of that offer, either.

How to Add a “noindex” and/or a “nofollow” Metatag

- Copie uma das tags a seguir.

For “noindex”:

<META NAME=”robots” CONTENT=”noindex”>

For “nofollow”:

<META NAME=”robots” CONTENT=”nofollow”>

For both “noindex” and “nofollow”:

<META NAME=”robots” CONTENT=”noindex,nofollow”>

- Add the tag to the <head> section of your page’s HTML, a.k.a. the page’s header.

Se você é um cliente da HubSpot, isso é muito fácil - clique aqui ou role para baixo para obter instruções específicas para usuários do HubSpot.

Se vocês são não um cliente HubSpot, then you’ll have to paste this tag into the code on your webpage manually. Don’t worry — it’s pretty simple. Here’s how you do it.

First, open the source code of the web page you’re trying to de-index. Then, paste the full tag into a new line within the <head> section of your page’s HTML, known as the page’s header. The screenshots below will walk you through it.

O tag significa o início do seu cabeçalho:

Here’s the metatag for both “noindex” and “nofollow” pasted within the header:

E a tag significa o final do cabeçalho:

Estrondo! É isso. Essa tag diz ao mecanismo de pesquisa para dar meia-volta e ir embora, deixando a página fora de qualquer resultado de pesquisa.

Sem índice, sem acompanhamento no HubSpot

Adding the “noindex” and “nofollow” meta tags is even easier. All you have to do is open the HubSpot tool to the page you want to add these tags to and choose the “Settings” tab.

Next, under Advanced Options and click into “Head HTML.” In the window below, paste the appropriate code snippet. In the example below, I’ve added both a “noindex” and a “nofollow” tag since it’s a thank-you page.

Press “Save,” and you’re golden.

Nenhum índice com sucesso, sem seguir uma página

Você acabou de apagar magicamente sua página dos resultados de pesquisas. Agora, você pode começar a capturar mais leads perdidos novamente.

Now, keep in mind that you won’t see results instantaneously. Your changes won’t kick in until the next time a search engine crawls your page. Depending on how often you typically publish new pages on your website, it actually could take a few weeks. The more frequently you publish content, the more often search engines will crawl your site. The best way to keep track of how frequently Google visits your website is to examine yourestatísticas de rastreamento in Google Webmaster Tools.

Bottom line: If you notice that your page is still appearing in Google’s search results even with the “noindex” tag, it’s probably because Google hasn’t crawled your site since you added the tag. Você pode solicitar que o Google rastreie novamente sua página usando o Buscar como ferramenta do Google.

Also, note that some search engines’ web crawlers might interpret these directives differently than Google does, so your page might still appear in results from other search engines. But for Google, it’ll work just fine — once it does get around to crawling your website.

Regardless, you’ll be able to sleep a little easier knowing you’ve ultimately made your website a better place for your marketing.

Nota do editor: Este artigo foi publicado originalmente em julho de 2016 e foi atualizado para maior abrangência.

Fonte: https://blog.hubspot.com/marketing/how-to-unindex-pages-from-search-engines