當網站的 67% 的索引網址是分頁時，抓取和 Google 搜索排名會發生什麼變化？ [搜索引擎優化案例研究]
已發表: 2021-10-07
多年來，關於如何從 SEO 角度最好地處理分頁，存在很多困惑和爭論。 谷歌在這方面的改變並沒有幫助，這導致對最佳前進道路的更多困惑。 例如，谷歌在 2019 年 3 月宣布停止支持 rel next/prev 來整合跨分頁集的索引屬性（並且……它意識到多年來一直如此——只是沒人知道）。
這讓 SEO 社區中的許多人感到震驚，並且讓網站所有者和 SEO 想知道哪個是處理前進分頁的最佳方式（如果需要更改！）例如，分頁是否可以索引，網站所有者是否應該使用“noindex，follow”相反，還是應該將分頁規範化到系列中的第一頁？ 由於分頁存在於許多不同類型的網站上，並且可能導致網站上出現大量額外頁面，因此網站所有者和 SEO 希望盡其所能解決這種情況。
但這重要嗎？ 選擇錯誤的路徑會導致嚴重的 SEO 問題嗎？ 如果你的大部分被索引的頁面都是分頁的怎麼辦？ 這些都是很好的問題，我希望這個案例研究將根據我正在幫助進行大量分頁（包括 67% 的索引頁面）的客戶提供至少一些答案。 是的，67%。
那麼，這是否在 SEO 方面造成了大問題，谷歌是否花費了太多時間來抓取分頁，以至於它缺少更新鮮、更重要的內容，並且排名受到影響（GASP）？ 讓我們開始。
谷歌多年來處理分頁的立場：
由於隨著時間的推移，我幫助許多大型網站進行了大量分頁，因此我能夠看到（並體驗）谷歌如何處理分頁的演變。 那次經歷讓我寫了一篇博客文章，介紹如何為 SEO 設置分頁，其中包含來自 Google 的所有最新更新和公告。 還有一些更新我必須涵蓋……
早在 2012 年，Google 的 Maile Ohye 就發布了一個出色的視頻，介紹了提供分頁時的 SEO 最佳實踐。 在該視頻中，Maile 解釋了您可以根據內容類型設置分頁的各種方法，包括將文章分成多個頁面和類別分頁（如電子商務零售商）。 在該視頻中，她還解釋瞭如何使用 rel next/prev 來整合分頁集中的索引屬性。 Maile 在該視頻中繪製的藍圖成為設置分頁 SEO 的基礎，我經常在我的審核、帖子和演示文稿中引用該視頻。
這是 Maile Ohye 2012 年視頻的屏幕截圖，解釋了更多關於 rel next/prev 的分頁。 請注意，不再支持rel next/prev 跨分頁合併索引屬性。 更多關於下一個：
Google Nukes rel next/prev（沒有人注意到）：
正如我之前提到的，在 2019 年，谷歌對 SEO 投下了一顆炸彈，並解釋說它不再支持使用 rel next/prev 來整合跨分頁集的索引屬性。 而且雪上加霜的是，他們還解釋說多年來一直如此！ 值得注意的是，將 rel next/prev 用於可訪問性目的仍然很好，但它不會對 SEO 產生影響。
正如您所猜到的那樣，搜索引擎優化（儘管我認為可以公平地說我們很高興他們告訴我們！）谷歌在檢查了它的一些系統後意識到了這一點，並註意到 rel next/prev 沒有被用於索引和排名目的。 哎呀。
作為一個幫助許多公司在使用分頁時設置 rel next/prev 的人，最後一點讓我思考……如果谷歌多年來沒有使用 rel next/prev，而我一直在幫助的公司沒有甚至注意到谷歌停止支持它（排名不受影響），那麼也許谷歌在處理分頁方面非常擅長。
換句話說，也許我們都無緣無故地變形了。 同樣，我幫助的那些有很多分頁的客戶沒有看到任何重大變動或下降，因為谷歌取消了對 rel next/prev 的支持。 這也符合谷歌的約翰穆勒已經解釋了一段時間。 哎呀，他甚至在 2019 年的推文中解釋了這一點。例如，他說“大多數人似乎都在以合理的方式進行分頁……”接下來我將詳細介紹 John 的建議。
Google 的 John Mueller 提出了關於分頁的問題：
自從 Google 停止使用 rel next/prev 來整合索引屬性後，Google 的 John Mueller 就被問到很多關於設置分頁的最佳方式的問題。 約翰在他的搜索中心環聊視頻中提供了一些很好的建議。
約翰解釋說，谷歌在處理分頁方面有很多經驗（只要它可以輕鬆識別分頁）。 而且由於它在處理分頁方面擁有豐富的經驗，因此它確實不應該對網站 SEO 產生重大影響。 它可以“工作”。
此外，John 經常解釋將文章內容分成多個頁面與包含分頁的類別頁面（列出指向其他 url 的頁面）之間的區別。 這是兩個非常不同的場景，如果需要，可以從分頁的角度進行不同的處理。
他還解釋說，對於類別分頁（如電子商務類別頁面），您可以讓所有頁面都可索引（這是更可取的），您可以使用“noindex，follow”，甚至可以規範化到第一個頁面分頁。 這實際上取決於您的內容的交聯程度、分頁對於發現、信號傳遞等的重要性。您可以閱讀我關於分頁的帖子，以查看 Google 關於此的最新更新。
這是約翰關於設置分頁的最新視頻之一，涵蓋了我剛剛解釋的大部分內容（視頻中的 13:16）：
還值得注意的是，谷歌剛剛發布了一些電子商務 SEO 的優秀最佳實踐（其中還介紹瞭如何處理分頁）。 在該文檔中，他們解釋為分頁中的每個頁面提供自引用規範標籤（並避免規範化到系列中的第一頁）。 這意味著所有分頁都應該是可索引的。
警告：細微差別！ - SEO 和網站所有者關於處理分頁的兩個要點：
與 SEO 中的大多數事情一樣，處理分頁也存在細微差別。 首先，您網站的大小很重要，因為您不希望過多的分頁影響抓取預算。 正如 John 解釋的那樣，如果您沒有數十萬頁（或更多），那麼您真的不必擔心分頁會影響爬網預算。 但是，如果您確實有這麼多頁面，那麼確保 Google 專注於抓取您最重要的頁面非常重要。 這可能會導致跨站點以不同方式處理分頁。 在下面的案例研究中很快就會有更多關於抓取預算的信息。
我想指出的另一件事是，我堅信每個序列不應該有過多的分頁。 例如，我會避免為每個分頁集提供數千頁的分頁（比如一個具有數千頁分頁的類別）。 我認為有許多分頁集（如果需要）很好，但我只會提供每組合理數量的頁面（這將基於您的站點、內容等）。這個數字可能因站點而異，但我不會不要讓您的分頁超載，每個序列有數千頁。 我會為用戶和搜索引擎做最好的事情。
例如，這是一個在一個類別中有近 3,700 頁分頁的網站……
案例研究：背景信息、分頁設置和索引級別。
我在本案例研究中涉及的網站的抓取足跡約為 200K 頁面（在索引和排除的 url 之間）。 我無法詳細介紹客戶關注的內容，但您可以將其視為一個提供有關類別、組織、產品和這些產品評論的大量信息的網站。 該網站上還有一個博客，其中包含針對其利基的深入內容。
從分頁的角度來看，整個網站都有相當多的內容。 這主要是在類別、組織和評論頁面上。 由於網站上有許多產品和評論沒有很好地交叉鏈接（基於業務運作方式），因此分頁對於發現（對於 Googlebot 和用戶）很重要。 出於這個原因，我們絕對希望確保分頁是可索引的，並且 Google 可以按照分頁 URL 上的鏈接訪問產品頁面、評論頁面等。
我已經幫助這家公司很長時間了，早在 2012 年就幫助他們制定分頁策略。他們一直在使用 Maile Ohye 在我之前介紹的視頻中描述的方法。 這就是分頁中的每個頁面都包含自引用規範標籤的地方，包含 rel next/prev（現已棄用），並為每個頁面底部的分頁系列提供了強大的文本導航。 請記住，這是長期以來的推薦設置。 該網站已經設置了多年......您可以在我關於設置分頁的帖子中了解有關該設置的更多信息。
索引級別：神聖的分頁蝙蝠俠！
根據網站上的分頁量，目前有很大比例的索引網址。 具體來說，分頁佔總索引頁面的 67%。 是的，超過三分之二的索引網址是分頁的！ 驚恐的事件！！ :)
這些不一定是我們想要在 SERP 中排名的頁面（除了集合中的第一頁），但我們絕對希望 Google 從分頁中發現所有目標頁面。 請記住，rel next/prev 應該通過合併跨分頁集的索引屬性和（通常）在 SERP 中顯示該集的第一頁來為我們解決這個問題。 正如我之前介紹的那樣，它不再受支持。 更多關於排名的信息。
抓取預算和抓取統計
網站上有這麼多分頁頁面被編入索引，抓取統計數據是什麼樣的？ Googlebot 是否在翻閱許多分頁頁面並丟失重要的、更新鮮的頁面？
首先，抓取預算實際上只是大型網站需要擔心的事情。 例如，谷歌表示，擁有超過 100 萬個獨立網址的網站或擁有 1 萬個獨立網址且“內容快速變化”的中型網站需要擔心抓取預算。 該網站有 18.6K 網址被編入索引，並且總抓取足跡不到 200K 網址。 所以，它不是一個小網站，但也不是很大。
此外，重要的是要了解並非所有頁面都以相同的頻率爬網（基於重要性）。 多年來，谷歌的 John Mueller 已經多次解釋了這一點。 因此，儘管網站上可能有很多分頁，但這並不意味著 Google 會不斷地抓取所有分頁，而不是抓取您更新（或更重要）的內容。
這是約翰對此的解釋（視頻中的 12:42）：
該網站的新內容確實會相對較快地被抓取。 此外，檢查抓取統計報告，您可以看到最近抓取的較新內容，並且分頁不會壓倒報告。 因此，儘管該網站有 67% 的索引頁面是分頁的，但從爬網預算和爬網統計數據的角度來看（在我看來）是可以的。 根據谷歌多年來對抓取預算的解釋，這是有道理的。
隨著時間的推移表現。 趨勢看起來如何？
好的，這就是橡膠上路的地方。 有這麼多的分頁索引會影響排名或自然搜索性能嗎？
一句話，不行。
多年來，該網站的性能一直非常穩定（並通過許多廣泛的核心更新）。 他們也看到了長期的強勁增長（尤其是從 2012 年我第一次開始幫助他們時）。
以下是 GSC 過去 16 個月的趨勢：
以下是過去兩年的搜索可見度趨勢：
以下是自 2012 年以來的搜索可見度趨勢：
搜索結果中的分頁排名如何（超過第一頁）？ 分頁頁面是否出現在 SERP 中並推動流量？
不，不是。 它只佔 Google 搜索流量的一小部分。 例如，在過去三個月中，Google 網絡搜索的點擊次數為 162 萬次。 分頁僅佔其中的五千次點擊。
在過去 3 個月中，分頁僅佔 Google 搜索總點擊次數的 0.3%：
我認為對於這個站點最重要的事情是要記住，各種“產品”頁面沒有從站點的其他區域充分鏈接（基於公司的商業模式和站點需要如何設置）。 因此，分頁對於確保 Googlebot 可以訪問其中許多目標網址非常重要。 這就是為什麼確保分頁是可索引的，它使用自引用規範等很重要的原因。
針對分頁較多的網站的最終提示和建議：
所以你有它。 一個有 67% 的索引 url 是分頁的網站，它在 SERP 中運行得很好。 我並不是說每個站點都應該使用這種方法，但就像 Google 的 John Mueller 多次解釋的那樣，Google 在處理分頁方面有很多經驗。 它通常很有效……在結束這篇文章時，我為處理大量分頁的網站提供了一些最終提示和建議。
- 分頁設置：設置方面，您可以使用多種方法來處理分頁。 您選擇的路徑取決於您正在處理的內容類型和您的內部鏈接結構。 請參閱我上面關於跨多個頁面與列表頁面（如類別）的內容拆分的建議，以及這些目標頁面在整個網站上的鏈接程度。
- 可索引與不可索引：重要的是要了解，如果您沒有索引分頁，那麼隨著時間的推移，這些頁面上的鏈接可能會被 Google 刪除。 因此，如果您想確保 Google 通過分頁（和傳遞信號）找到這些目標網址，我會讓分頁可索引。 正如本案例研究所示，它可以很好地工作。
- 規範化分頁：如果您要將所有分頁規範化到該系列的第一頁，請務必了解 rel canonical 只是對 Google 的提示。 如果它認為這是正確的做法，它仍然可以選擇索引某些頁面。 多年來，我在幾篇博客文章中都談到了這一點。 不要假設規範化的頁面實際上正在被規範化。 這是我不喜歡將分頁規範化到集合中的根頁面的原因之一。
- 抓取統計信息和日誌文件：不要只檢查索引級別。 我也會檢查 GSC 中的爬網統計報告（如果可以的話，還可以查看日誌文件）。 正如我在這篇文章前面提到的，並非所有頁面都以相同的頻率進行爬網。 Google 可以根據抓取需求更頻繁地抓取您網站上的某些網址。 這意味著分頁可能不會像您的主頁、重要類別頁面、產品頁面等那樣被抓取。不要認為分頁的高索引級別意味著存在問題。 它可能完全沒問題。
- 跟踪性能：確保隨著時間的推移跟踪所有這些，並確定分頁是否會導致 SEO 方面的問題（我懷疑大多數情況下）。 同樣，谷歌可以很好地處理分頁，並且在這方面有很多經驗（只要它可以輕鬆識別分頁）。 在必要時使用分頁很好（並且可能很好）。 我更擔心每組分頁頁面的數量，而不是網站上索引的分頁頁面總數。 就像我之前說的，確保你的分頁對用戶和搜索引擎都有意義。
- Google 的建議：最後，聽 Google 的 John Mueller 並閱讀 Google 的文檔。 谷歌在處理跨站點分頁方面有很多經驗，而且它通常可以“工作”。 我建議根據您自己的情況實施分頁解決方案，隨著時間的推移分析該設置，並確保它適合您。
摘要– 是的，您的網站可以通過大量的分頁索引在 SEO 方面做得很好。
如果您正在處理整個網站的大量分頁，我希望這個案例研究對您有所幫助。 我知道多年來關於分頁和 SEO 存在很多混淆，尤其是自 Google 於 2019 年取消 rel next/prev 以來。正如我在這篇文章中解釋的那樣，Google 在處理分頁方面有著悠久的歷史，通常不會引起很多網站排名方面的問題（只要設置正確）。 您採用的方法實際上取決於您自己的網站、內容類型和內部鏈接結構。 如果你最終有很多分頁索引，那就這樣吧。 正如本案例研究所證明的那樣，它對您來說效果很好。
GG