Como corrigir “Duplicado, o Google escolheu um canônico diferente do usuário” no Google Search Console

Muitos sites não otimizam seu conteúdo duplicado de maneira amigável para SEO. Na verdade, de acordo com a pesquisa de Tomek Rudzki, os status relacionados a conteúdo duplicado são o segundo problema mais comum no Google Search Console para sites de todos os tamanhos.

Um problema predominante de SEO de conteúdo duplicado é quando o Google não concorda com os usuários sobre qual versão da página é a principal. Nesse caso, você pode ver um status "Duplicado, o Google escolheu um canônico diferente do usuário" no Google Search Console.

Veja o que a documentação do Google diz sobre "Duplicado, o Google escolheu um canônico diferente do usuário":

Esta página está marcada como canônica para um conjunto de páginas, mas o Google acha que outro URL é melhor canônico. O Google indexou a página que consideramos canônica em vez desta. Recomendamos que você marque explicitamente esta página como uma duplicata do URL canônico. Esta página foi descoberta sem uma solicitação de rastreamento explícita. A inspeção desse URL deve mostrar o URL canônico selecionado pelo Google.

fonte: Google

As consequências da indexação do Google com conteúdo diferente do pretendido variam dependendo dos casos individuais. O mais grave é desencorajar os usuários de visitar ou permanecer em sua página , mostrando a eles resultados que, por exemplo, estão faltando informações essenciais que estão presentes em sua versão preferida.

Este artigo mostra as possíveis causas e soluções para o status "Duplicado, o Google escolheu canônico diferente do usuário".

Onde você pode encontrar o status "Duplicado, o Google escolheu canônico diferente do usuário"?

Você pode verificar o status da sua página no relatório Cobertura do índice no Google Search Console.

O relatório Cobertura do Índice inclui quatro grupos de questões:

• Erro,
• Válido com Avisos,
• Válido,
• Excluído.

"Duplicado, o Google escolheu um canônico diferente do usuário" pertence à categoria Excluídos . Os URLs excluídos não são indexados e o Google não acredita que seja um erro.  

Você pode ver uma lista de URLs informando “Duplicado, o Google escolheu um canônico diferente do usuário” depois de clicar no status na seção Detalhes.

A lista está disponível para exportação, mas há um limite de 1.000 URLs. No entanto, se você tiver mais de um sitemap, poderá fazer download do relatório para cada sitemap separadamente e aumentar o número de URLs exportados.

Como verificar qual página o Google escolheu como canônica?

O status "Duplicado, o Google escolheu um canônico diferente do usuário" não mostra qual página o Google escolheu. Tudo o que você pode ver é que é diferente da página que você deseja indexar.

Para ver qual página o Google escolheu, você precisa navegar até a ferramenta de inspeção de URL.  

Depois de inserir o URL que deseja verificar, você verá muitas informações diferentes, incluindo o status da Cobertura. Você pode expandir essa opção para ver o canônico selecionado pelo Google e o canônico declarado pelo usuário.

Graças à API de inspeção de URL, agora você pode verificar em massa até 2.000 URLs por dia usando a ferramenta de inspeção de URL e obter as informações sobre o canônico selecionado pelo Google em um arquivo JSON.

O acesso à API adicionado é muito útil para quem luta com o Google escolhendo um canônico diferente do selecionado pelo usuário. Sem a API, é extremamente demorado verificar o canônico selecionado pelo Google em uma grande amostra de URLs.

Como o Google escolhe a página canônica?

Antes de entrar nos métodos que o Google usa para escolher a página canônica, deixe-me explicar por que é essencial que o Google determine quais páginas são as originais:

Em primeiro lugar, as diretrizes do Google afirmam que o mecanismo de busca “ se esforça para indexar e mostrar páginas com informações distintas. ” Por isso, após encontrar conteúdo duplicado, ele escolhe o canônico que identifica como o mais útil para seus usuários. Caso contrário, os usuários veriam muitos resultados diferentes levando a conteúdo idêntico.

Em segundo lugar, de acordo com a documentação do Google, “ duplicatas são rastreadas com menos frequência” do que as páginas canônicas. Ele permite que o Google economize seus recursos para rastrear páginas mais importantes e reduza a carga de rastreamento em seu servidor.

Agora, vamos ver como o Google escolhe a página canônica.

Tentamos escolher o URL canônico seguindo duas diretrizes gerais: Primeiro, qual URL parece que o site deseja que usemos ; então, qual é a preferência do site? E em segundo lugar, qual URL seria mais útil para o usuário?

fonte: John Mueller

Alguns dos sinais que o Google analisa ao determinar a versão canônica incluem:

• Marcas canônicas,
• Mapas do site,
• Estrutura de ligação interna,
• HTTPS sobre protocolo HTTP,
• URL mais bonito,
• Redirecionamentos.

Esses fatores são dicas que você pode usar para ajudar o Google a entender qual página você deseja indexar. No entanto, o motor de busca não é obrigado a respeitá-los.

Tags canônicas

 <link rel="canonical" href="https://example.com/original-page">

Uma tag canônica é um pedaço de código HTML colocado na seção <head>. Seu atributo href inclui um link para a versão canônica de uma página. Se a página em questão for uma versão duplicada e não canônica do seu conteúdo, você deve colocar um link para a versão canônica no atributo href.

Mas você também pode adicionar uma tag canônica de autorreferência. Uma página de autorreferência contém uma tag canônica com o atributo href apontando para si mesmo. Durante o SEO Office Hours do Google, John Mueller recomendou o uso das tags canônicas de autorreferência, mesmo que haja apenas uma versão da página.

Eu recomendo fazer esse canônico auto-referencial porque realmente deixa claro para nós qual página você deseja indexar ou qual deve ser a URL quando for indexada.

Mesmo se você tiver uma página, às vezes existem diferentes variações do URL que podem puxar essa página para cima. Por exemplo, com parâmetros no final, talvez com letras maiúsculas ou www e não www, e todas essas coisas podem ser limpas com uma tag rel canonical.

fonte: John Mueller

Mapas de site

Os Sitemaps são arquivos de texto simples que listam URLs que você, como proprietário do site, deseja que sejam indexados. Ele serve como um roteiro para os bots dos mecanismos de pesquisa, permitindo que eles encontrem URLs valiosos rapidamente, sem rastrear todo o site primeiro.

Os Sitemaps devem incluir apenas URLs canônicos. Colocar páginas duplicadas em um mapa do site pode desperdiçar seu orçamento de rastreamento (o número de URLs que o Google pode e deseja rastrear em seu site) e confundir os mecanismos de pesquisa.

No entanto, colocar um URL dentro de um sitemap não garante que os mecanismos de pesquisa indexem esse URL. É apenas uma dica para ajudá-los a entender quais páginas são mais importantes para você. Em nosso Ultimate Guide to XML Sitemaps, você pode aprender mais sobre como criar e otimizar seu sitemap.

Vinculação interna

A maneira como as páginas são vinculadas ajuda os mecanismos de pesquisa a encontrar todas as páginas valiosas e determinar sua importância.

Quanto mais valiosa for a página, mais links devem apontar para ela.

Vamos imaginar que existem duas páginas igualmente valiosas. Um deles está vinculado apenas a partir do mapa do site. O outro é facilmente encontrado na navegação e possui links apontando para ele de outras páginas do site. Nesse caso, o Google assume que a página com links é mais valiosa do que aquela encontrada apenas no mapa do site.

A estrutura de links internos é parte de uma questão mais complexa chamada arquitetura do site. Se você quiser saber mais sobre isso, recomendo que leia nosso extenso guia sobre arquitetura de sites, que explica em detalhes o que é e como criar um perfeito para o seu site.

HTTPS sobre HTTP

HTTP é um protocolo que define a transferência de dados entre um servidor e um cliente. HTTPS é a versão criptografada do protocolo. Graças à camada adicional de segurança, a transmissão de dados é mais segura e o risco de manipulação de dados é menor.

HTTPS influencia a classificação de suas páginas.  

Se você tiver uma página acessível nas versões HTTP e HTTPS, o Google optará por indexar a versão HTTPS.

URLs mais bonitos

Os URLs ajudam os usuários e os mecanismos de pesquisa a ver o que uma página contém. Como proprietário de um site, você tem controle sobre a aparência de seus URLs. Como John Mueller disse, se mais de um URL levar à mesma página, o Google pode escolher “os mais bonitos”.

O que exatamente significa um URL mais bonito? O Google diz que “a estrutura de URL de um site deve ser o mais simples possível”.

Vejamos os exemplos de dois URLs:

1. https://www.example.com/index.php?id_sezione=360&sid=sdr3bc
2. https://www.example.com/summer/dress

O segundo URL é definitivamente “mais bonito”. Isso ocorre porque é mais curto e indica claramente o que esta página contém. Se você estiver interessado em aprender mais sobre a estrutura de URL, recomendo ler nosso artigo sobre Como criar um URL amigável para SEO.

Redirecionamentos

Usar o Redirecionamento 301 é uma das maneiras de consolidar conteúdo duplicado em seu site. Se um usuário ou um bot de mecanismo de pesquisa acessar uma página, ele os redirecionará automaticamente para uma nova.

Você pode usá-lo quando quiser que apenas uma versão de sua página permaneça disponível em seu site. Por exemplo, se você tem uma versão www e não www, você pode usar o redirecionamento 301 para especificar qual você deve ficar disponível e ser indexado.

Causas e soluções para o status "Duplicado, o Google escolheu canônico diferente do usuário"

Em alguns casos, escolher um URL canônico diferente do usuário pode não trazer consequências. Se duas páginas forem idênticas, a que o Google escolheu pode ter uma classificação tão boa quanto a que você escolheu.

Mas é provável que você tenha escolhido uma página canônica por um motivo. Se as páginas não forem idênticas, a que o Google escolheu pode estar faltando alguns detalhes essenciais, o que pode desencorajar os usuários a visitar seu site.

Então, vamos ver as possíveis causas pelas quais o Google pode discordar de você sobre a versão canônica e as formas de corrigir o problema.

O Google pode escolher uma página canônica diferente da do usuário por vários motivos, incluindo:

• Sinais inconsistentes,
• Tag canônica auto-referenciada sem conteúdo exclusivo ,
• Problemas de renderização,
• Segmentação de diferentes países com o mesmo idioma/semelhante.

Sinais inconsistentes

Conforme mencionado em “Como o Google escolhe a página canônica?” capítulo, existem vários sinais que você pode usar para indicar qual página é a original. No entanto, se você usá-los de forma inconsistente, pode confundir o Google e fazer com que ele escolha o URL errado para indexar.

Vamos imaginar uma situação quando você tem três páginas duplicadas:

• Todas as páginas têm tags canônicas apontando para a página A,
• A página B está no mapa do site,
• A página C tem mais links internos apontando para ela.

Em caso de sinais conflitantes, o Google precisa adivinhar qual das páginas é a verdadeira canônica.

Quanto mais claro você fizer seus sinais, mais fácil será confiar neles :). Por exemplo, se links internos, sitemaps, hreflang, rel-canonical, etc. estiverem alinhados, não há muito o que adivinhar. Muitas vezes é bastante inconsistente e mais difícil de escolher.

— John (pessoal) (@JohnMu) 28 de fevereiro de 2018

Solução

Existe uma solução para essa causa do status “Duplicado, o Google escolheu um canônico diferente do usuário”: seja consistente!

Aqui estão algumas dicas para ter em mente ao configurar os sinais canônicos:

• Evite colocar páginas não canônicas ou páginas com redirecionamentos em seu sitemap,
• Certifique-se de que seus links internos sejam consistentes e todos os links apontem para a versão canônica,
• As tags canônicas devem apontar para a versão final, não incluir uma página redirecionando para uma página diferente,
• Evite loops canônicos (a página A tem uma tag canônica apontando para a página B e a página B tem uma tag canônica apontando para a página A) e cadeias canônicas (a página A tem uma tag canônica apontando para a página B e a página B tem uma tag canônica apontando para a página C).

Tag canônica auto-referenciada sem conteúdo exclusivo

Se você tiver várias páginas com tags canônicas de autorreferência, mas o Google decidir que elas não contêm nenhum valor exclusivo, ele poderá selecionar apenas uma página para indexar.

Geralmente acontece em sites de comércio eletrônico quando vários produtos têm a mesma descrição.

Se você estiver vendendo o mesmo modelo de cama em tamanhos diferentes, convém que todas as páginas com tamanhos diferentes sejam indexadas para que os usuários possam encontrar facilmente o que estão procurando. Afinal, se eles estiverem procurando uma cama king-size e virem apenas camas pequenas destinadas a crianças nos resultados de pesquisa, eles podem ignorar sua página e visitar o site da concorrência.

Se alguém estiver procurando por um trecho de texto que esteja dentro dessa descrição duplicada em suas páginas, reconheceremos que esse trecho de texto foi encontrado em várias páginas do seu site e tentaremos selecionar talvez uma ou duas páginas do seu site para mostrar.

fonte: John Mueller

Solução

Adicione conteúdo exclusivo às suas páginas.

Não confie apenas nas tags canônicas de auto-referência. Em vez disso, certifique-se de que cada página tenha um valor exclusivo.

John Mueller abordou o problema de descrições duplicadas durante o SEO Office Hours do Google. Ele afirmou que você deve ter pelo menos algumas informações de texto adicionais indicando que os produtos são diferentes.

[…]se você não tiver nada no conteúdo textual que cubra o elemento visual de seus produtos, será muito difícil para nós mostrá-los corretamente nos resultados da pesquisa. […]

Então esse é o ângulo que eu tomaria aqui, é bom ter partes da descrição duplicadas. Mas eu definitivamente me certificaria de que você tenha pelo menos algo lá que realmente tenha um texto sobre os elementos visuais que são exclusivos desses produtos individuais que você está vendendo.

fonte: John Mueller

Problema de renderização

Os mecanismos de pesquisa ainda não são perfeitos na renderização de JavaScript. Portanto, se você depende muito dele para exibir seu conteúdo, o Google pode ter problemas para ver todos os elementos da sua página.

A renderização é essencial para que o Google e outros mecanismos de pesquisa vejam e entendam o conteúdo e o layout do nosso site. Sem renderização, seu conteúdo não existe online. Já superamos os tempos em que você podia ver seu conteúdo simplesmente olhando para o código HTML do site.

fonte: Rendering SEO manifesto – por que JavaScript SEO não é suficiente

O Google pode pensar que algumas páginas são duplicadas porque não pode renderizar o conteúdo que as torna únicas.

Digamos que você tenha três páginas exclusivas. Cada um tem uma tag canônica auto-referenciada. O JavaScript gera seu conteúdo principal e, por algum motivo, o Google não o processa. Em vez disso, ele vê apenas um espaço vazio e alguns elementos adicionais, como uma barra de navegação, que são os mesmos para todas as páginas. Para o Google, essas páginas parecem duplicadas, e é por isso que ele escolhe apenas uma delas para indexar.

Você pode verificar como o Google renderiza sua página na ferramenta de inspeção de URL no Google Search Console. A ferramenta fornece capturas de tela da sua página renderizada que permitem que você obtenha informações sobre como o Google vê sua página. Se o seu conteúdo estiver faltando nas capturas de tela, isso indica que pode haver alguns problemas com a renderização.

Solução

Primeiro, você deve garantir que o Google tenha acesso a todos os scripts necessários. Certifique-se de que seus recursos JavaScript não estejam bloqueados pelo robots.txt (um arquivo que você pode criar para especificar quais páginas podem ser rastreadas).

Se seus recursos estiverem acessíveis ao Google, você precisará avaliar os scripts. Você deve considerar aspectos como o tamanho do seu script e se você precisa de tudo isso para gerar a página.

O tópico Rendering SEO é extenso e, se você não tiver experiência em codificação, poderá precisar da ajuda de seus desenvolvedores para resolver alguns dos problemas mais complexos. Para mais informações, visite nosso manifesto Rendering SEO, onde explicamos o assunto em detalhes.

Segmentação de diferentes países com o mesmo idioma/semelhante idioma

Se você tiver páginas que segmentam países específicos que falam o mesmo idioma ou idioma semelhante (por exemplo, EUA e Reino Unido), pode acontecer que o Google tenha escolhido apenas um deles para indexar.

Suponha que a única solução que você usa para indicar que está segmentando países diferentes com o mesmo idioma é uma tag canônica de auto-referência. Nesse caso, o Google pode não entender o propósito e pensar que todas são páginas duplicadas. Como resultado, ele escolherá apenas um deles para indexar e seus usuários poderão encontrar páginas dedicadas a diferentes países em seus resultados de pesquisa.

Pode ser um problema especialmente grande para sites de comércio eletrônico porque pode resultar na incapacidade dos clientes de fazer uma compra.

Solução

Você deve sempre certificar-se de ter as tags hreflang no lugar.

Uma tag hreflang é um pedaço de código HTML que ajuda a especificar o idioma e o país de destino da página.

 <link rel="alternate" hreflang=" en-gb " href="https://en-gb.example.com/item">
<link rel="alternate" hreflang=" en-us " href="https://en-us.example.com/item">

A tag hreflang permite especificar não apenas o idioma (en – inglês), mas também o país (gb – Grã-Bretanha, nós – Estados Unidos).

Outra coisa que você pode fazer é garantir que seu conteúdo não seja apenas traduzido, mas também localizado. Mesmo que a língua seja a mesma, países diferentes têm culturas diferentes. Certifique-se de ajustar suas páginas para usuários de um país específico. Essa prática não apenas oferece uma melhor experiência do usuário para seus clientes, mas também pode convencer o Google de que essas páginas são exclusivas.

Por último, mas não menos importante, você deve ter um plano de backup caso as técnicas mencionadas acima falhem. Crie um banner JavaScript que apareça com base na localização do usuário. Se detectar que, por exemplo, um usuário do Reino Unido entra em uma versão dos EUA, ele sugerirá uma versão mais adequada e permitirá que o cliente decida se deseja permanecer ou visitar uma página designada para sua região.

"Duplicado, o Google escolheu um canônico diferente do usuário" vs. "Duplicado, URL enviado não selecionado como canônico" vs. "Duplicado sem canônico selecionado pelo usuário"

"Duplicado, o Google escolheu um canônico diferente do usuário" pode ser facilmente confundido com dois status diferentes no relatório Cobertura do índice:

• "Duplicado, URL enviado não selecionado como canônico" e
• “Duplicar sem canônico selecionado pelo usuário.”

Esses status indicam a mesma coisa: a página não está indexada porque o Google acha que ela não é canônica.

A diferença está em como o Google descobriu a página e se o usuário declarou uma tag canônica ou não.

A principal diferença entre eles é que “Duplicado, o Google escolheu canônico diferente do usuário” já havia especificado uma tag canônica que o Google não pegou. Em contraste, os outros dois status não tinham nenhuma tag canônica definida pelo usuário.

Além disso, você solicitou explicitamente que o relatório de URL "URL duplicado, enviado não selecionado como canônico" fosse indexado ao enviá-lo em seu sitemap.

Empacotando

Se você vir o status "Duplicado, o Google escolheu canônico diferente do usuário" e achar que o Google não escolheu a página certa para indexar, há algumas coisas que você pode fazer para dar à sua página preferida as melhores chances de ser indexada:

• Seja consistente no envio de sinais canônicos: certifique-se de que apenas a página canônica esteja em seu mapa do site e os links internos estejam apontando para ela,
• Certifique-se de que cada página tenha um valor exclusivo. Se suas páginas de produtos tiverem a mesma descrição, adicione conteúdo textual indicando que os produtos são diferentes,
• Certifique-se de que seu conteúdo seja renderizado corretamente na ferramenta de inspeção de URL,
• Não apenas traduza o conteúdo para diferentes idiomas, mas também localize -o para o país específico que você segmenta,
• Lembre-se sempre de adicionar tags hreflang para conteúdo direcionado a vários países.