Apa yang terjadi pada perayapan dan peringkat pencarian Google ketika 67% dari url yang diindeks situs adalah pagination? [Studi Kasus SEO]

Ada banyak kebingungan dan perdebatan selama bertahun-tahun tentang cara terbaik menangani pagination dari perspektif SEO. Itu tidak membantu bahwa Google berubah di bagian depan ini, yang telah menyebabkan lebih banyak kebingungan tentang jalan terbaik ke depan. Misalnya, Google mengumumkan pada Maret 2019 bahwa mereka berhenti mendukung rel next/prev untuk mengkonsolidasikan properti pengindeksan dari seluruh set paginasi (dan… menyadari bahwa itu terjadi selama bertahun-tahun – hanya tidak ada yang tahu).

Itu mengejutkan banyak orang di komunitas SEO dan membuat pemilik situs dan SEO bertanya-tanya mana cara terbaik untuk menangani pagination bergerak maju (jika perubahan diperlukan sama sekali!) Misalnya, haruskah pagination dapat diindeks, haruskah pemilik situs menggunakan "noindex, ikuti" sebagai gantinya, atau haruskah mereka hanya mengkanonikalisasi pagination ke halaman satu dalam seri? Karena pagination hadir di begitu banyak jenis situs yang berbeda, dan dapat mengarah ke sejumlah besar halaman tambahan di sebuah situs, pemilik situs dan SEO ingin mengatasi situasi tersebut sebaik mungkin.

Tapi apakah itu penting? Akankah memilih jalur yang salah menyebabkan masalah serius dari segi SEO? Dan bagaimana jika sebagian besar halaman Anda yang diindeks adalah pagination? Ini semua adalah pertanyaan bagus dan saya harap studi kasus ini akan memberikan setidaknya beberapa jawaban berdasarkan klien yang saya bantu dengan banyak pagination (terdiri dari 67% halaman yang diindeks). Ya, 67%.

Jadi, apakah ini menyebabkan masalah besar dari segi SEO, apakah Google menghabiskan terlalu banyak waktunya untuk merayapi pagination sehingga kehilangan konten yang lebih segar dan lebih penting, dan apakah peringkat terpengaruh (GASP)?? Mari kita mulai.

Sikap Google dalam menangani pagination selama bertahun-tahun:
Karena saya telah membantu banyak situs berskala besar dari waktu ke waktu dengan banyak pagination, saya dapat melihat (dan mengalami) evolusi cara Google menangani pagination itu. Pengalaman itu membuat saya menulis posting blog yang membahas cara mengatur pagination untuk SEO, yang berisi semua pembaruan dan pengumuman terbaru dari Google. Dan ada beberapa pembaruan yang harus saya bahas…

Kembali pada tahun 2012, Maile Ohye Google menerbitkan video luar biasa yang mencakup praktik terbaik SEO saat memberikan pagination. Dalam video itu, Maile menjelaskan berbagai cara Anda dapat mengatur pagination berdasarkan tipe konten, termasuk artikel yang dibagi menjadi beberapa halaman dan pagination kategori (seperti untuk pengecer e-commerce). Dalam video itu dia juga menjelaskan cara menggunakan rel next/prev untuk mengkonsolidasikan properti pengindeksan dari seluruh set paginasi. Cetak biru yang dipetakan Maile dalam video itu menjadi dasar untuk menyiapkan pagination SEO-bijaksana, dan saya sering mereferensikan video itu dalam audit, posting, dan presentasi saya.

Berikut adalah tangkapan layar dari video Maile Ohye dari 2012 yang menjelaskan lebih lanjut tentang rel berikutnya/sebelumnya untuk pagination. Catatan, rel next/prev tidak didukung lagi untuk mengonsolidasikan properti pengindeksan di seluruh pagination. Lebih lanjut tentang itu selanjutnya:

Google Nukes rel next/prev (dan tidak ada yang memperhatikan):
Seperti yang saya sebutkan sebelumnya, pada tahun 2019 Google menjatuhkan bom pada SEO dan menjelaskan bahwa itu tidak mendukung penggunaan rel next/prev lagi untuk mengkonsolidasikan properti pengindeksan dari seluruh set paginasi. Dan untuk menambah penghinaan pada cedera, mereka juga menjelaskan bahwa ini telah terjadi selama bertahun-tahun ! Perlu dicatat bahwa masih bagus untuk menggunakan rel next/prev untuk tujuan aksesibilitas, tetapi tidak akan berpengaruh pada SEO.

Seperti yang dapat Anda tebak, SEO menjadi balistik (walaupun saya pikir adil untuk mengatakan bahwa kami senang mereka memberi tahu kami!) Google menyadari hal ini setelah memeriksa beberapa sistemnya dan melihat rel next/prev tidak digunakan untuk pengindeksan dan tujuan peringkat. Ups.

Sebagai seseorang yang telah membantu banyak perusahaan menyiapkan rel next/prev saat menggunakan pagination, poin terakhir itu membuat saya berpikir… Jika rel next/prev tidak digunakan selama bertahun-tahun oleh Google, dan perusahaan yang telah saya bantu tidak bahkan perhatikan bahwa Google berhenti mendukungnya (peringkat tidak terpengaruh), maka mungkin Google sangat pandai menangani pagination.

Dengan kata lain, mungkin kami menjadi tidak bugar tanpa alasan. Sekali lagi, klien yang saya bantu yang memiliki banyak pagination tidak melihat pergerakan besar atau penurunan berdasarkan Google menghapus dukungan untuk rel berikutnya/sebelumnya. Dan itu juga cocok dengan apa yang telah dijelaskan oleh John Mueller dari Google selama beberapa waktu. Heck, dia bahkan menjelaskan itu di utas tweet dari 2019. Misalnya, dia berkata "kebanyakan tampaknya melakukan pagination dengan cara yang masuk akal yang berhasil ..." Saya akan membahas lebih lanjut tentang rekomendasi John selanjutnya.

John Mueller dari Google Dibumbui Dengan Pertanyaan Tentang Pagination:
Sejak Google berhenti menggunakan rel next/prev untuk mengkonsolidasikan properti pengindeksan, John Mueller dari Google telah ditanyai banyak pertanyaan tentang cara terbaik untuk menyiapkan pagination. Dan John telah memberikan beberapa saran bagus dalam video Search Central Hangout miliknya.

John menjelaskan bahwa Google memiliki banyak pengalaman dalam menangani pagination (asalkan dapat mengidentifikasi pagination dengan mudah). Dan karena memiliki banyak pengalaman dalam menangani pagination, itu seharusnya tidak memiliki dampak besar pada situs SEO-bijaksana. Itu hanya bisa "bekerja".

Juga, John sering menjelaskan perbedaan antara memisahkan konten artikel menjadi beberapa halaman dan memiliki halaman kategori yang berisi pagination (halaman daftar yang mengarah ke url lain). Itu adalah dua skenario yang sangat berbeda dan dapat ditangani secara berbeda dari sudut pandang pagination, jika diperlukan.

Dia juga menjelaskan bahwa untuk pagination kategori (seperti halaman kategori e-commerce), Anda dapat memiliki semua halaman yang dapat diindeks (yang lebih disukai), Anda dapat menggunakan "noindex, follow", atau Anda bahkan dapat mengkanonikalisasi ke halaman satu di paginasi. Itu sangat tergantung pada seberapa baik konten Anda di-crosslink, seberapa penting pagination untuk penemuan, untuk melewatkan sinyal, dll. Anda dapat membaca posting saya tentang pagination untuk melihat pembaruan terbaru dari Google tentang ini.

Berikut adalah salah satu video terbaru John tentang pengaturan pagination yang mencakup sebagian besar dari apa yang baru saja saya jelaskan (pada 13:16 dalam video):

Perlu juga dicatat bahwa Google baru saja menerbitkan beberapa praktik terbaik yang luar biasa untuk SEO e-niaga (di mana mereka juga membahas cara menangani pagination). Dalam dokumen itu, mereka menjelaskan untuk menyediakan tag kanonik referensi sendiri untuk setiap halaman di pagination (dan menghindari kanonikalisasi ke halaman satu dalam seri). Itu berarti semua pagination harus dapat diindeks.

Peringatan: Nuansa Depan! -Dua poin penting untuk SEO dan pemilik situs tentang penanganan pagination:
Seperti kebanyakan hal dalam SEO, ada nuansa yang terlibat dengan penanganan pagination. Pertama, ukuran situs Anda penting karena Anda tidak ingin terlalu banyak pagination menghambat anggaran perayapan. Seperti yang dijelaskan John, jika Anda tidak memiliki ratusan ribu halaman (atau lebih), maka Anda tidak perlu khawatir tentang penomoran halaman yang memengaruhi anggaran perayapan. Tetapi jika Anda memiliki banyak halaman, maka penting untuk memastikan Google memfokuskan crawling pada halaman Anda yang paling penting. Dan itu mungkin menyebabkan penanganan pagination secara berbeda di seluruh situs. Lebih lanjut tentang anggaran perayapan segera dalam studi kasus di bawah ini.

Hal lain yang ingin saya tunjukkan adalah bahwa saya sangat percaya Anda tidak boleh memiliki pagination yang berlebihan per urutan. Misalnya, saya akan menghindari menyediakan ribuan halaman pagination per set paginasi (seperti satu kategori dengan ribuan halaman pagination). Saya pikir tidak apa-apa untuk memiliki banyak set paginasi (jika diperlukan), tetapi saya hanya akan memberikan jumlah halaman yang masuk akal per set (yang akan didasarkan pada situs Anda, konten, dll.) Jumlah itu dapat bervariasi per situs, tetapi saya tidak akan melakukannya. jangan membebani pagination Anda dengan ribuan halaman per urutan. Saya akan melakukan yang terbaik untuk pengguna dan mesin pencari.

Misalnya, inilah situs dengan hampir 3.700 halaman pagination dalam satu kategori…

Studi Kasus: Informasi latar belakang, pengaturan pagination, dan level pengindeksan.
Situs yang saya liput dalam studi kasus ini memiliki jejak perayapan sekitar 200 ribu halaman (antara url yang diindeks dan yang dikecualikan). Saya tidak dapat menjelaskan terlalu banyak detail tentang apa yang menjadi fokus klien, tetapi Anda dapat menganggapnya sebagai situs yang menyediakan banyak informasi tentang kategori, organisasi, produk, dan ulasan produk tersebut. Ada juga blog di situs yang berisi konten mendalam yang berfokus pada niche mereka.

Dari sudut pandang pagination, ada cukup banyak di seluruh situs. Itu terutama pada halaman kategori, organisasi, dan ulasan. Karena ada banyak produk dan ulasan yang tidak saling terkait dengan baik di situs (berdasarkan cara bisnis beroperasi), penomoran halaman penting untuk penemuan (untuk Googlebot dan pengguna). Untuk alasan itu, kami benar-benar ingin memastikan bahwa pagination dapat diindeks dan bahwa Google dapat mengikuti tautan pada url yang diberi halaman ke halaman produk, halaman ulasan, dll.

Saya telah membantu perusahaan ini sejak lama dan membantu mereka menyusun strategi pagination sejak tahun 2012. Mereka telah menggunakan pendekatan yang dijelaskan Maile Ohye dalam video yang saya bahas sebelumnya. Di situlah setiap halaman di pagination berisi tag kanonik referensi sendiri, berisi rel next/prev (sekarang tidak digunakan lagi), dan menyediakan navigasi teks yang kuat ke seri paginasi di bagian bawah setiap halaman. Ingat, ini adalah pengaturan yang disarankan untuk waktu yang lama. Situs ini telah mengatur ini selama bertahun-tahun… dan Anda dapat mempelajari lebih lanjut tentang pengaturan itu di posting saya tentang pengaturan pagination.

Tingkat Pengindeksan: Pembukaan halaman suci Batman!
Berdasarkan berapa banyak pagination di situs, saat ini merupakan persentase besar dari url yang diindeks. Untuk lebih spesifiknya, pagination membentuk 67% dari total halaman yang diindeks. Ya, lebih dari dua pertiga url yang diindeks adalah pagination! Menyeramkan!! :)

Ini belum tentu halaman yang ingin kami rangking di SERP (selain halaman pertama di set), tetapi kami pasti ingin Google menemukan semua halaman tujuan dari pagination. Dan ingat, rel next/prev seharusnya menanganinya untuk kami dengan mengkonsolidasikan properti pengindeksan dari seluruh set paginasi dan (biasanya) memunculkan halaman pertama dari set di SERPs. Itu tidak didukung lagi seperti yang saya bahas sebelumnya. Lebih lanjut tentang peringkat segera.

Anggaran Perayapan dan Statistik Perayapan
Dengan banyaknya halaman yang diberi halaman di situs yang diindeks, seperti apa tampilan statistik perayapan? Apakah Googlebot mengaduk-aduk banyak halaman yang diberi halaman dan melewatkan halaman-halaman penting yang lebih segar?

Pertama, anggaran perayapan benar-benar hanya sesuatu yang perlu dikhawatirkan oleh situs skala besar. Misalnya, Google menyatakan bahwa situs dengan lebih dari 1 juta url unik atau situs berukuran sedang dengan 10 ribu url unik dengan "konten yang berubah dengan cepat" perlu mengkhawatirkan anggaran perayapan. Situs ini memiliki 18,6 ribu url yang diindeks dan total jejak perayapan di bawah 200 ribu url. Jadi, ini bukan situs kecil, tapi juga tidak besar.

Selain itu, penting untuk dipahami bahwa semua halaman tidak dirayapi dengan frekuensi yang sama (berdasarkan kepentingan). John Mueller dari Google telah menjelaskan hal ini berkali-kali selama bertahun-tahun. Jadi, meskipun mungkin ada banyak paginasi di situs, itu tidak berarti Google akan terus merayapi semua paginasi itu alih-alih konten Anda yang lebih segar (atau lebih penting).

Inilah John yang menjelaskan ini (pada 12:42 dalam video):

Konten baru situs ini dirayapi dengan relatif cepat. Selain itu, memeriksa pelaporan statistik perayapan, Anda dapat melihat bahwa konten yang lebih baru sedang dirayapi baru-baru ini dan penomoran halaman tidak membanjiri pelaporan. Jadi meskipun situs memiliki 67% halaman yang diindeks adalah pagination, itu baik-baik saja dari perspektif anggaran perayapan dan statistik perayapan (menurut saya). Itu masuk akal berdasarkan apa yang telah dijelaskan Google selama bertahun-tahun tentang anggaran perayapan.

Kinerja dari waktu ke waktu. Bagaimana tren terlihat?
OK, di sinilah karet menghantam jalan. Apakah memiliki banyak pagination yang diindeks memengaruhi peringkat atau kinerja pencarian organik sama sekali?

Singkatnya, tidak .

Kinerja situs sangat stabil selama bertahun-tahun (dan melalui sejumlah pembaruan inti yang luas). Mereka telah melihat pertumbuhan yang kuat dalam jangka panjang juga (terutama dari 2012 ketika saya pertama kali mulai membantu mereka).

Berikut adalah tren 16 bulan terakhir dari GSC:

Berikut adalah tren visibilitas penelusuran selama dua tahun terakhir:

Dan inilah tren visibilitas penelusuran sejak 2012:

Bagaimana dengan peringkat pagination dalam hasil pencarian (di luar halaman satu)? Apakah halaman yang diberi halaman muncul di SERP dan mengarahkan lalu lintas?
Tidak terlalu. Ini menyumbang persentase lalu lintas yang sangat kecil dari Google Penelusuran. Misalnya, selama tiga bulan terakhir, ada 1,62 juta klik dari pencarian web Google. Pagination menyumbang hanya lima ribu klik tersebut.

Akun pagination hanya 0,3% dari total klik dari Google Penelusuran selama 3 bulan terakhir:

Saya pikir hal yang paling penting untuk diingat untuk situs ini adalah bahwa berbagai halaman "produk" tidak ditautkan secara memadai dari area lain situs (berdasarkan model bisnis perusahaan dan bagaimana situs perlu disiapkan). Jadi, pagination penting untuk memastikan Googlebot bisa mendapatkan banyak dari url tujuan tersebut. Dan itulah mengapa penting untuk memastikan pagination dapat diindeks, menggunakan kanonik referensi sendiri, dll.

Kiat dan rekomendasi terakhir untuk situs dengan banyak pagination:
Jadi di sana Anda memilikinya. Sebuah situs dengan 67% dari url yang diindeks adalah pagination dan berjalan dengan baik di SERP. Saya tidak mengatakan pendekatan ini adalah apa yang harus digunakan setiap situs, tetapi seperti yang telah dijelaskan berkali-kali oleh John Mueller dari Google, Google memiliki banyak pengalaman menangani pagination. Sering kali berhasil… Untuk mengakhiri posting ini, saya telah memberikan beberapa tip dan rekomendasi terakhir untuk situs yang berurusan dengan banyak pagination.

• Pengaturan pagination : Dari segi pengaturan , Anda memiliki beberapa metode yang Anda inginkan untuk menangani pagination. Jalur yang Anda pilih bergantung pada jenis konten yang Anda hadapi dan struktur tautan internal Anda. Lihat rekomendasi saya di atas tentang konten yang dibagi di beberapa halaman versus halaman daftar (seperti kategori), dan seberapa baik halaman tujuan tersebut ditautkan di seluruh situs.
• Dapat diindeks vs. Tidak dapat diindeks: Penting untuk dipahami bahwa jika Anda tidak mengindeks paginasi, maka tautan pada halaman tersebut dapat dihapus oleh Google seiring waktu. Jadi, jika Anda ingin memastikan Google menemukan url tujuan tersebut melalui pagination (dan meneruskan sinyal), saya akan membuat pagination dapat diindeks. Seperti yang ditunjukkan oleh studi kasus ini, ini dapat bekerja dengan sangat baik.
• Canonicalizing Pagination: Jika Anda mengkanonikalisasi semua pagination ke halaman pertama dalam seri, penting untuk dipahami bahwa rel canonical hanyalah petunjuk untuk Google. Itu masih dapat memilih untuk mengindeks halaman tertentu jika yakin itu hal yang benar untuk dilakukan. Saya telah membahas ini di beberapa posting blog selama bertahun-tahun. Jangan berasumsi bahwa halaman yang dikanonikalisasi sebenarnya sedang dikanonikalisasi. Ini adalah salah satu alasan saya bukan penggemar berat kanonikalisasi pagination ke halaman root di set.
• Statistik Perayapan dan File Log: Jangan hanya memeriksa level pengindeksan. Saya juga akan memeriksa pelaporan statistik perayapan di GSC (dan file log jika Anda bisa mendapatkannya). Seperti yang saya bahas sebelumnya dalam posting ini, tidak semua halaman dirayapi dengan frekuensi yang sama. Google dapat merayapi url tertentu di situs Anda lebih sering berdasarkan permintaan perayapan. Itu berarti pagination mungkin tidak dirayapi sebanyak beranda Anda, halaman kategori penting, halaman produk, dll. Jangan berasumsi bahwa tingkat pengindeksan yang tinggi untuk pagination berarti ada masalah. Ini bisa baik-baik saja.
• Kinerja Pelacakan: Pastikan Anda melacak semua ini dari waktu ke waktu dan menentukan apakah pagination menyebabkan masalah SEO-bijaksana (yang saya ragu untuk kebanyakan kasus). Sekali lagi, Google dapat menangani pagination dengan sangat baik dan memiliki banyak pengalaman melakukan itu (asalkan dapat mengidentifikasi pagination dengan mudah). Menggunakan pagination saat diperlukan tidak masalah (dan bisa bagus). Saya akan lebih khawatir tentang jumlah halaman yang diberi halaman per set daripada jumlah total halaman yang diberi halaman yang diindeks di situs. Seperti yang saya katakan sebelumnya, pastikan pagination Anda masuk akal bagi pengguna dan mesin pencari.
• Rekomendasi Google: Terakhir, dengarkan John Mueller dari Google dan baca dokumentasi Google. Google memiliki banyak pengalaman menangani pagination di seluruh situs, dan seringkali hanya "berfungsi". Saya sarankan menerapkan solusi pagination berdasarkan situasi Anda sendiri, menganalisis pengaturan itu dari waktu ke waktu, dan pastikan itu berfungsi untuk Anda.

Ringkasan – Ya, situs Anda bisa menjadi SEO-bijaksana dengan banyak pagination yang diindeks.
Jika Anda berurusan dengan banyak pagination di situs Anda, saya harap studi kasus ini bermanfaat. Saya tahu ada banyak kebingungan selama bertahun-tahun tentang pagination dan SEO, dan terutama sejak Google nuked rel next/prev pada tahun 2019. Seperti yang saya jelaskan di posting ini, Google memiliki sejarah panjang dalam menangani pagination dan biasanya tidak akan menyebabkan banyak masalah di seluruh peringkat situs (asalkan diatur dengan benar). Pendekatan yang Anda ambil benar-benar mengarah ke situs Anda sendiri, jenis konten, dan struktur tautan internal. Dan jika Anda akhirnya memiliki banyak pagination yang diindeks, maka biarlah. Seperti yang dibuktikan oleh studi kasus ini, ini bisa berhasil untuk Anda.

GG