Cara Memperbaiki "Duplikat, Google memilih kanonik yang berbeda dari pengguna" di Google Search Console

Banyak situs web gagal mengoptimalkan konten duplikat mereka dengan cara yang ramah SEO. Bahkan, menurut penelitian Tomek Rudzki, status terkait konten duplikat adalah masalah paling umum kedua di Google Search Console untuk situs web dari semua ukuran.

Masalah SEO duplikat konten yang berlaku adalah ketika Google tidak setuju dengan pengguna tentang versi halaman mana yang utama. Dalam hal ini, Anda mungkin melihat status "Duplikat, Google memilih kanonik yang berbeda dari pengguna" di Google Search Console.

Inilah yang dikatakan dokumentasi Google tentang "Duplikat, Google memilih kanonik yang berbeda dari pengguna":

Halaman ini ditandai sebagai kanonik untuk satu set halaman, tetapi Google menganggap URL lain membuat kanonik yang lebih baik. Google telah mengindeks halaman yang kami anggap kanonik daripada yang ini. Kami menyarankan Anda untuk secara eksplisit menandai halaman ini sebagai duplikat dari URL kanonik. Laman ini ditemukan tanpa permintaan perayapan eksplisit. Memeriksa URL ini akan menampilkan URL kanonis yang dipilih Google.

sumber: Google

Konsekuensi dari pengindeksan Google terhadap konten yang berbeda dari yang Anda maksudkan berbeda-beda tergantung pada kasus individual. Yang paling parah adalah mencegah pengguna mengunjungi atau tetap berada di halaman Anda dengan menunjukkan kepada mereka hasil yang, misalnya, kehilangan informasi penting yang ada pada versi pilihan Anda.

Artikel ini menunjukkan kemungkinan penyebab dan solusi untuk status "Duplikat, Google memilih kanonik yang berbeda dari pengguna".

Di mana Anda dapat menemukan status "Duplikat, Google memilih kanonik yang berbeda dari pengguna"?

Anda dapat memeriksa status halaman Anda di laporan Cakupan Indeks di Google Search Console.

Laporan Cakupan Indeks mencakup empat kelompok masalah:

• Kesalahan,
• Berlaku dengan Peringatan,
• Sah,
• Pengecualian.

"Duplikat, Google memilih kanonik yang berbeda dari pengguna" termasuk dalam kategori Dikecualikan . URL yang dikecualikan tidak diindeks, dan menurut Google itu tidak salah.  

Anda dapat melihat daftar URL yang melaporkan "Duplikat, Google memilih kanonik yang berbeda dari pengguna" setelah mengklik status di bagian Detail.

Daftar ini tersedia untuk ekspor, tetapi ada batas 1000 URL. Namun, jika Anda memiliki lebih dari satu peta situs, Anda dapat mengunduh laporan untuk setiap peta situs secara terpisah dan menambah jumlah URL yang diekspor.

Bagaimana cara memeriksa halaman mana yang dipilih Google sebagai halaman kanonik?

Status "Duplikat, Google memilih kanonik yang berbeda dari pengguna" tidak menunjukkan halaman mana yang dipilih Google. Yang bisa Anda lihat hanyalah halaman yang berbeda dari halaman yang ingin Anda indeks.

Untuk melihat halaman mana yang dipilih Google, Anda perlu menavigasi ke alat Inspeksi URL.  

Setelah memasukkan URL yang ingin Anda periksa, Anda akan melihat banyak informasi berbeda, termasuk status Cakupan. Anda dapat memperluas opsi ini untuk melihat kanonik yang dipilih Google dan kanonik yang dideklarasikan Pengguna.

Berkat API Inspeksi URL, kini Anda dapat memeriksa secara massal hingga 2000 URL per hari menggunakan alat Inspeksi URL dan mendapatkan informasi tentang kanonik yang dipilih Google dalam file JSON.

Akses API yang ditambahkan sangat membantu bagi siapa saja yang kesulitan dengan Google memilih kanonik yang berbeda dari yang dipilih pengguna. Tanpa API, sangat memakan waktu untuk memeriksa kanonis yang dipilih Google pada sampel besar URL.

Bagaimana cara Google memilih halaman kanonik?

Sebelum saya membahas metode yang digunakan Google untuk memilih halaman kanonik, izinkan saya menjelaskan mengapa penting bagi Google untuk menentukan halaman mana yang asli:

Pertama, pedoman Google menyatakan bahwa mesin pencari “ berusaha keras untuk mengindeks dan menampilkan halaman dengan informasi yang berbeda. Itu sebabnya setelah menemukan konten duplikat, ia memilih konten kanonik yang diidentifikasi sebagai yang paling berguna bagi penggunanya. Jika tidak, pengguna akan melihat banyak hasil berbeda yang mengarah ke konten yang identik.

Kedua, menurut dokumentasi Google, " duplikat lebih jarang dirayapi" daripada halaman kanonik. Ini memungkinkan Google untuk menyimpan sumber dayanya untuk merayapi halaman yang lebih penting dan mengurangi beban perayapannya di server Anda.

Sekarang, mari kita lihat bagaimana Google memilih halaman kanonik.

Kami mencoba memilih URL kanonik dengan mengikuti dua pedoman umum: Pertama, URL mana yang terlihat seperti situs yang ingin kami gunakan ; jadi, apa preferensi situsnya? Dan kedua, URL mana yang lebih berguna bagi pengguna?

sumber: John Mueller

Beberapa sinyal yang dilihat Google saat menentukan versi kanonik meliputi:

• Tag kanonik,
• Peta Situs,
• Struktur penghubung internal,
• HTTPS melalui protokol HTTP,
• URL yang terlihat lebih baik,
• Pengalihan.

Faktor-faktor ini adalah petunjuk yang dapat Anda gunakan untuk membantu Google memahami halaman mana yang ingin Anda indeks. Namun, mesin pencari tidak berkewajiban untuk menghormati mereka.

Tag kanonik

 <link rel="canonical" href="https://example.com/original-page">

Tag kanonik adalah bagian dari kode HTML yang ditempatkan di bagian <head>. Atribut href-nya menyertakan tautan ke versi kanonik halaman. Jika halaman yang dimaksud adalah duplikat, versi non-kanonik dari konten Anda, Anda harus menempatkan tautan ke versi kanonik di atribut href.

Tetapi Anda juga dapat menambahkan tag kanonik referensi sendiri. Halaman referensi diri berisi tag kanonik dengan atribut href menunjuk ke dirinya sendiri. Selama Jam Kantor SEO Google, John Mueller merekomendasikan penggunaan tag kanonik referensi sendiri, meskipun hanya ada satu versi halaman.

Saya merekomendasikan melakukan kanonik referensi mandiri ini karena ini benar-benar menjelaskan kepada kami halaman mana yang ingin Anda indeks, atau URL apa yang seharusnya ketika diindeks.

Bahkan jika Anda memiliki satu halaman, terkadang ada variasi URL yang berbeda yang dapat menarik halaman tersebut ke atas. Misalnya, dengan parameter pada akhirnya, mungkin dengan huruf kecil atau www dan non-www, dan semua hal ini dapat dibersihkan dengan tag rel canonical.

sumber: John Mueller

Peta Situs

Peta Situs adalah file teks sederhana yang mencantumkan URL yang Anda sebagai pemilik situs ingin diindeks. Ini berfungsi sebagai peta jalan untuk bot mesin pencari, memungkinkan mereka menemukan URL yang berharga dengan cepat, tanpa merayapi seluruh situs web terlebih dahulu.

Peta Situs hanya boleh menyertakan URL kanonis. Menempatkan halaman duplikat di dalam peta situs mungkin membuang anggaran perayapan Anda (jumlah URL yang dapat dan ingin dirayapi Google di situs web Anda) dan membingungkan mesin telusur.

Namun, menempatkan URL di dalam peta situs tidak menjamin bahwa mesin pencari akan mengindeks URL tersebut. Ini hanya petunjuk yang membantu mereka memahami halaman mana yang paling Anda pedulikan. Dalam Panduan Utama kami untuk Peta Situs XML, Anda dapat mempelajari lebih lanjut tentang membuat dan mengoptimalkan peta situs Anda.

Tautan internal

Cara halaman ditautkan bersama membantu mesin pencari menemukan semua halaman yang berharga dan menentukan kepentingannya.

Semakin bernilai halaman, semakin banyak tautan yang mengarah ke sana.

Mari kita bayangkan ada dua halaman yang sama berharganya. Salah satunya hanya ditautkan dari peta situs. Yang lain mudah ditemukan di navigasi dan memiliki tautan yang mengarah ke sana dari halaman lain di situs web. Dalam hal ini, Google berasumsi bahwa halaman dengan tautan lebih berharga daripada yang hanya ditemukan di peta situs.

Struktur tautan internal adalah bagian dari masalah yang lebih kompleks yang disebut arsitektur situs web. Jika Anda ingin mempelajari lebih lanjut tentangnya, saya sarankan Anda membaca panduan ekstensif kami tentang arsitektur situs, yang menjelaskan secara rinci apa itu dan bagaimana merancang yang sempurna untuk situs web Anda.

HTTPS melalui HTTP

HTTP adalah protokol yang mendefinisikan transfer data antara server dan klien. HTTPS adalah versi protokol yang dienkripsi. Berkat lapisan keamanan tambahan, transmisi data lebih aman, dan risiko manipulasi data lebih kecil.

HTTPS memengaruhi peringkat halaman Anda.  

Jika Anda memiliki halaman yang dapat diakses dalam versi HTTP dan HTTPS, Google akan memilih untuk mengindeks versi HTTPS.

URL yang terlihat lebih baik

URL membantu pengguna dan mesin telusur melihat isi halaman. Sebagai pemilik situs web, Anda memiliki kendali atas tampilan URL Anda. Seperti yang dikatakan John Mueller, jika lebih dari satu URL mengarah ke halaman yang sama, Google mungkin memilih "yang tampak lebih bagus."

Apa sebenarnya arti dari URL yang terlihat lebih bagus? Google mengatakan bahwa “Struktur URL situs harus sesederhana mungkin.”

Mari kita lihat contoh dua URL:

1. https://www.example.com/index.php?id_sezione=360&sid=sdr3bc
2. https://www.example.com/summer/dress

URL kedua jelas “tampak lebih bagus.” Ini karena lebih pendek dan jelas menunjukkan isi halaman ini. Jika Anda tertarik untuk mempelajari lebih lanjut tentang struktur URL, saya sarankan membaca artikel kami tentang Cara Membuat URL yang SEO-Friendly.

Pengalihan

Menggunakan Pengalihan 301 adalah salah satu cara Anda dapat menggabungkan konten duplikat di situs Anda. Jika pengguna atau bot mesin pencari mengakses halaman, itu akan secara otomatis mengarahkan mereka ke yang baru.

Anda dapat menggunakannya ketika Anda hanya ingin satu versi halaman Anda tetap tersedia di situs web Anda. Misalnya, jika Anda memiliki versi www dan non-www, Anda dapat menggunakan pengalihan 301 untuk menentukan versi mana yang harus tetap tersedia dan diindeks.

Penyebab dan solusi untuk status "Duplikat, Google memilih kanonik yang berbeda dari pengguna"

Dalam beberapa kasus, memilih URL kanonik yang berbeda dari pengguna mungkin tidak membawa konsekuensi. Jika dua halaman identik, yang dipilih Google mungkin memiliki peringkat yang sama baiknya dengan yang Anda pilih.

Tetapi kemungkinan besar, Anda memilih halaman kanonik karena suatu alasan. Jika halaman tidak identik, halaman yang dipilih Google mungkin kehilangan beberapa detail penting, yang dapat membuat pengguna enggan mengunjungi situs web Anda.

Jadi mari kita lihat kemungkinan penyebab mengapa Google mungkin tidak setuju dengan Anda tentang versi kanonik dan cara memperbaiki masalah.

Google mungkin memilih halaman kanonis yang berbeda dari pengguna karena berbagai alasan, termasuk:

• Sinyal tidak konsisten,
• Tag kanonik referensi mandiri tanpa konten unik,
• Masalah rendering,
• Menargetkan negara yang berbeda dengan bahasa yang sama/serupa.

Sinyal tidak konsisten

Seperti yang disebutkan dalam "Bagaimana cara Google memilih halaman kanonik?" bab, ada beberapa sinyal yang dapat Anda gunakan untuk menunjukkan halaman mana yang asli. Namun, jika Anda menggunakannya secara tidak konsisten, ini mungkin membingungkan Google dan menyebabkannya memilih URL yang salah untuk diindeks.

Mari kita bayangkan situasi ketika Anda memiliki tiga halaman duplikat:

• Semua halaman memiliki tag kanonik yang mengarah ke halaman A,
• Halaman B ada di peta situs,
• Halaman C memiliki tautan internal paling banyak yang mengarah ke sana.

Jika ada sinyal yang bertentangan, Google perlu menebak halaman mana yang benar-benar kanonik.

Semakin jelas Anda membuat sinyal, semakin mudah mereka percaya :). Misalnya, jika tautan internal, peta situs, hreflang, rel-canonical, dll semuanya sejajar, tidak banyak yang bisa ditebak. Seringkali cukup tidak konsisten & lebih sulit untuk dipilih.

— John (pribadi) (@JohnMu) 28 Februari 2018

Larutan

Ada satu solusi untuk penyebab status "Duplikat, Google memilih kanonik yang berbeda dari pengguna" ini: konsisten!

Berikut adalah beberapa tip yang perlu diingat saat menyiapkan sinyal kanonik:

• Hindari menempatkan halaman non-kanonik atau halaman dengan pengalihan di peta situs Anda,
• Pastikan tautan internal Anda konsisten dan setiap tautan mengarah ke versi kanonik,
• Tag kanonik harus mengarah ke versi final, jangan menyertakan halaman yang mengarahkan ulang ke halaman lain,
• Hindari loop kanonik (halaman A memiliki tag kanonik yang mengarah ke halaman B, dan halaman B memiliki tag kanonik yang mengarah ke halaman A), dan rantai kanonik (halaman A memiliki tag kanonik yang mengarah ke halaman B, dan halaman B memiliki tag kanonik menunjuk ke halaman C).

Tag kanonik referensi mandiri tanpa konten unik

Jika Anda memiliki beberapa halaman dengan tag kanonik referensi sendiri, tetapi Google memutuskan bahwa halaman tersebut tidak berisi nilai unik, mungkin hanya satu halaman yang akan diindeks.

Biasanya terjadi di situs eCommerce ketika beberapa produk memiliki deskripsi yang sama.

Jika Anda menjual model tempat tidur yang sama dalam ukuran berbeda, Anda mungkin ingin semua halaman dengan ukuran berbeda diindeks sehingga pengguna dapat dengan mudah menemukan apa yang mereka cari. Lagi pula, jika mereka mencari tempat tidur king, dan mereka hanya melihat tempat tidur kecil yang ditujukan untuk anak-anak di hasil pencarian, mereka mungkin mengabaikan halaman Anda dan mengunjungi situs web pesaing Anda.

Jika seseorang menelusuri sepotong teks yang ada di dalam deskripsi duplikat ini di halaman Anda, maka kami akan mengenali bahwa potongan teks ini ditemukan di sekumpulan halaman di situs web Anda, dan kami akan mencoba untuk memilih mungkin satu atau dua halaman dari situs web Anda untuk ditampilkan.

sumber: John Mueller

Larutan

Tambahkan konten unik ke halaman Anda.

Jangan hanya mengandalkan tag kanonik referensi sendiri. Sebaliknya, pastikan bahwa setiap halaman memiliki nilai unik.

John Mueller membahas masalah deskripsi duplikat selama Jam Kantor SEO Google. Dia menyatakan bahwa Anda setidaknya harus memiliki beberapa informasi teks tambahan yang menunjukkan bahwa produknya berbeda.

[…]jika Anda sama sekali tidak memiliki konten tekstual yang mencakup elemen visual produk Anda, maka akan sangat sulit bagi kami untuk benar-benar menampilkannya dengan benar di hasil penelusuran. […]

Jadi sudut pandang yang akan saya ambil di sini adalah baik-baik saja untuk memiliki bagian dari deskripsi yang diduplikasi. Tapi saya pasti akan memastikan bahwa Anda setidaknya memiliki sesuatu di sana yang benar-benar memiliki teks tentang elemen visual yang unik untuk masing-masing produk yang Anda jual.

sumber: John Mueller

Masalah rendering

Mesin pencari masih belum sempurna dalam merender JavaScript. Jadi, jika Anda sangat bergantung padanya untuk menampilkan konten Anda, Google mungkin memiliki masalah dengan melihat setiap elemen di halaman Anda.

Rendering sangat penting bagi Google dan mesin pencari lainnya untuk melihat dan memahami konten dan tata letak situs web kami. Tanpa rendering, konten Anda tidak akan ada secara online. Kami telah melewati masa-masa ketika Anda dapat melihat konten Anda hanya dengan melihat kode HTML situs web.

sumber: Rendering SEO manifesto – mengapa JavaScript SEO tidak cukup

Google mungkin menganggap beberapa halaman adalah duplikat karena tidak dapat merender konten yang membuatnya unik.

Katakanlah Anda memiliki tiga halaman unik. Masing-masing memiliki tag kanonik referensi sendiri. JavaScript menghasilkan konten utama mereka, dan untuk beberapa alasan, Google tidak merendernya. Sebaliknya, itu hanya melihat ruang kosong dan beberapa elemen tambahan seperti bilah navigasi yang sama untuk setiap halaman. Untuk Google, halaman-halaman ini tampak seperti duplikat, dan itulah mengapa hanya satu yang dipilih untuk diindeks.

Anda dapat memeriksa bagaimana Google merender halaman Anda di alat Inspeksi URL di Google Search Console. Alat ini menyediakan tangkapan layar dari laman yang dirender yang memungkinkan Anda memperoleh wawasan tentang cara Google melihat laman Anda. Jika konten Anda tidak ada di tangkapan layar, ini menunjukkan bahwa mungkin ada beberapa masalah dengan rendering.

Larutan

Pertama, Anda harus memastikan bahwa Google memiliki akses ke semua skrip yang diperlukan. Pastikan sumber daya JavaScript Anda tidak diblokir oleh robots.txt (file yang dapat Anda buat untuk menentukan halaman mana yang dapat dirayapi).

Jika sumber daya Anda dapat diakses oleh Google, Anda harus mengevaluasi skrip. Anda harus mempertimbangkan aspek-aspek seperti ukuran skrip Anda dan jika Anda membutuhkan semuanya untuk menghasilkan halaman.

Topik Rendering SEO sangat luas, dan jika Anda tidak memiliki pengalaman pengkodean, Anda mungkin memerlukan bantuan pengembang Anda untuk menyelesaikan beberapa masalah yang lebih kompleks. Untuk informasi lebih lanjut, kunjungi manifesto Rendering SEO kami, di mana kami menjelaskan topik secara rinci.

Menargetkan negara yang berbeda dengan bahasa yang sama/mirip

Jika Anda memiliki laman yang menargetkan negara-negara tertentu yang berbicara dalam bahasa yang sama atau serupa (misalnya, AS dan Inggris Raya), mungkin saja Google hanya memilih salah satu dari mereka untuk diindeks.

Misalkan satu-satunya solusi yang Anda gunakan untuk menunjukkan bahwa Anda menargetkan negara yang berbeda dengan bahasa yang sama adalah sebagai tag kanonik referensi elf. Dalam hal ini, Google mungkin tidak memahami tujuannya dan menganggap ini semua adalah halaman duplikat. Akibatnya, hanya akan memilih salah satu dari mereka untuk diindeks, dan pengguna Anda mungkin menemukan halaman yang didedikasikan untuk negara yang berbeda dalam hasil pencarian mereka.

Ini mungkin menjadi masalah besar bagi situs eCommerce karena dapat mengakibatkan ketidakmampuan pelanggan untuk melakukan pembelian.

Larutan

Anda harus selalu memastikan bahwa Anda memiliki tag hreflang .

Tag hreflang adalah bagian dari kode HTML yang membantu Anda menentukan bahasa dan negara yang menjadi target halaman.

 <link rel="alternate" hreflang=" en-gb " href="https://en-gb.example.com/item">
<link rel="alternate" hreflang=" en-us " href="https://en-us.example.com/item">

Tag hreflang memungkinkan Anda untuk menentukan tidak hanya bahasa (en – English) tetapi juga negara (gb – Great Britain, us – United States).

Hal lain yang dapat Anda lakukan adalah memastikan konten Anda tidak hanya diterjemahkan tetapi juga dilokalkan. Walaupun bahasanya sama, beda negara beda budaya. Pastikan untuk menyesuaikan halaman Anda untuk pengguna dari negara tertentu. Praktik ini tidak hanya memberikan pengalaman pengguna yang lebih baik bagi pelanggan Anda, tetapi juga dapat meyakinkan Google bahwa halaman ini unik.

Last but not least, Anda harus memiliki rencana cadangan jika teknik yang disebutkan di atas gagal. Buat spanduk JavaScript yang muncul berdasarkan lokasi pengguna. Jika mendeteksi bahwa, misalnya, pengguna Inggris memasuki versi AS, itu akan menyarankan versi yang lebih cocok dan membiarkan pelanggan memutuskan apakah mereka ingin tinggal atau mengunjungi halaman yang ditunjuk untuk wilayah mereka.

“Duplikat, Google memilih kanonik yang berbeda dari pengguna” vs. “Duplikat, URL yang dikirimkan tidak dipilih sebagai kanonik” vs. “Gandakan tanpa kanonik yang dipilih pengguna”

“Duplikat, Google memilih kanonik yang berbeda dari pengguna” mungkin mudah dikacaukan dengan dua status berbeda dalam laporan Cakupan Indeks:

• “Duplikat, URL yang dikirimkan tidak dipilih sebagai kanonik,” dan
• “Duplikat tanpa kanonik yang dipilih pengguna.”

Status ini menunjukkan hal yang sama: halaman tidak diindeks karena menurut Google tidak kanonik.

Perbedaannya terletak pada bagaimana Google mengetahui tentang halaman tersebut dan apakah pengguna mendeklarasikan tag kanonik atau tidak.

Perbedaan utama di antara mereka adalah bahwa "Duplikat, Google memilih kanonik yang berbeda dari pengguna" telah menentukan tag kanonik yang tidak diambil oleh Google. Sebaliknya, dua status lainnya tidak memiliki tag kanonik yang ditentukan oleh pengguna.

Selain itu, Anda secara eksplisit meminta pelaporan URL “Duplikat, URL yang dikirimkan tidak dipilih sebagai kanonik” untuk diindeks dengan mengirimkannya di peta situs Anda.

Membungkus

Jika Anda melihat status "Duplikat, Google memilih kanonik yang berbeda dari pengguna" dan menurut Anda Google tidak memilih halaman yang tepat untuk diindeks, ada beberapa hal yang dapat Anda lakukan untuk memberi halaman pilihan Anda peluang terbaik untuk diindeks:

• Konsisten dalam mengirimkan sinyal kanonik: pastikan hanya halaman kanonik yang ada di peta situs Anda dan tautan internal yang mengarah ke sana,
• Pastikan setiap halaman memiliki nilai unik. Jika halaman produk Anda memiliki deskripsi yang sama, tambahkan konten tekstual yang menunjukkan bahwa produknya berbeda,
• Pastikan konten Anda dirender dengan benar di alat Inspeksi URL,
• Jangan hanya menerjemahkan konten untuk bahasa yang berbeda tetapi juga melokalkannya untuk negara tertentu yang Anda targetkan,
• Selalu ingat untuk menambahkan tag hreflang untuk konten yang menargetkan beberapa negara.