Google, Dizine Ekleme Sırasındaki URL'leri Unutuyor

İndeksleme hataları duyulmamış değildir. Google, bir süredir indeksleme ile ilgili sorunlar yaşıyor. Web sitesinin boyutundan bağımsız olarak, web sitesi sahibinin hatası olmayan herkesin başına gelebilirler . Daha geçen yıl, mobil indeksleme ve standartlaştırmayı içeren bir indeksleme hatası vakası yaşandı.  

Birkaç ay önce, Endeksleme SEO için Ultimate Kılavuzumun dizine eklenmediğini öğrendiğimde kişisel olarak bir dizine ekleme hatası yaşadım .

Kapsamlı bir araştırmadan sonra, Google'ın görünürde bir neden olmaksızın URL'nin yanlış sürümünü dizine eklediğini öğrendim. Bu özel hata hakkında daha fazla bilgiyi SEO Endeksleme için Nihai Kılavuzum Dizine Alınmadı makalemde bulabilirsiniz .

Bu yılın başlarında , Google'ın indeksleme kuyruğundaki URL'lerin izini kaybediyor olabileceğini belirten başka bir indeksleme hatası buldum.  

Adım adım parçalara ayıralım.

Google'ın indeksleme kuyruğunda unutulan URL

6 Ekim'de bir makale yayınladık: Rendering SEO: Google How Digests Your Content. Makale, Onely'den Bartosz Goralewicz, Google'dan Martin Splitt ve Kalicube'den Jason Barnard arasındaki bir konuşmanın kopyasıydı.

Ne yazık ki, yayın tarihinden itibaren üç hafta boyunca makale Google'dan herhangi bir trafik getirmedi.

Garip buldum - Google tarafından dizine eklenmemiş başka bir ilginç makale mi? Google başka bir indeksleme hatasından muzdarip mi?

Google'ın indeksleme sürecinin içini ve dışını anlamaya çalıştığım için küçük bir araştırma yapmaya karar verdim.

Google Arama Konsolunun bu URL hakkında söylediklerini kontrol ettim.

GSC, bu URL'nin "Keşfedildi - şu anda dizine eklenmemiş" olduğunu belirtti.  

Google'ın belgelerine baktığınızda, durumla ilgili aşağıdaki açıklamayı bulacaksınız:

Keşfedildi – şu anda dizine eklenmemiş: Sayfa Google tarafından bulundu, ancak henüz taranmadı.

kaynak: Google

URL'nin durumu oldukça olası görünüyordu. Google'ın nispeten küçük bir web sitesinde yayınlandıktan sonraki üç hafta içinde bu sayfayı taramadığına inanamıyordum.

Bu yüzden sunucu günlüklerimizi kontrol ettim.

Sunucu günlükleri, web sitenize gelen trafiği incelemenizi sağlar. Saat ve tarih, kullanıcı aracısı dizesi, IP adresi vb. dahil olmak üzere her istek hakkında bilgi içerirler. Bu bilgiler sayesinde, Googlebot'un bu sayfada olup olmadığını (ve ne zaman) görebiliyordum.

Şaşırtıcı bir şekilde, makaleyi yayınladığımız gün Googlebot'un sayfayı ziyaret ettiğini öğrendim!

Bu noktada iki önemli bilgiye sahip oldum:

1. Googlebot'un sayfayı henüz ziyaret etmediği Google Arama Konsolu verileri doğru değildi. Sunucu günlükleri, Googlebot'un makalenin yayınlandığı gün URL'yi ziyaret ettiğini kanıtladı .
2. Bu yalnızca Google Arama Konsolu'ndan gelen bir raporlama hatası değildi . Sayfa herhangi bir organik trafik almıyordu, bu nedenle raporda yalnızca hatalardan daha önemli sorunlar olduğu açıktı.

Daha fazla web sitesi Google'ın indeksleme hatasından muzdarip

Bu hata ve ölçeği hakkında daha fazla bilgi edinmek istedim, bu yüzden eyleme geçirilebilir sonuçlar çıkarmak için daha geniş bir web sitesi örneğini araştırdım.

Diğer dört web sitesinden sunucu günlüklerini topladım ve verileri inceledim.

İncelediğim web sitelerinin %100'ünün bu sorundan muzdarip olduğu ortaya çıktı . Googlebot tarafından ziyaret edilen, ancak Google Arama Konsolu tarafından yanlış bir şekilde şu şekilde sınıflandırılan birden çok URL vardı :

• Keşfedildi – şu anda dizine eklenmemiş veya
• Bilinmeyen.

Bilinmeyen durum söz konusu olduğunda, Google , sayfayı hiç ziyaret etmediğini ve URL'yi keşfetmeye dair bir hafızası bile olmadığını belirtiyor gibi görünüyor.

Sorunun, Google'ın ilk ziyaretinden 6 ay sonra bile test edilen sayfalardan birinde mevcut olduğunu keşfettim . Sunucu günlüklerine göre, son ziyaret 7 Mart'taydı, ancak 27 Ekim'de durum hala Bilinmiyor.

Görünüşe göre Google, indeksleme boru hattının bir noktasında URL'leri zaman zaman unutuyor. Arama motorunun sadece bazı URL'lerin izini mi kaybediyor yoksa kasıtlı olarak mı atlıyor belli değil.

Her iki durumda da, sonuçları ağırdır. Unutulan sayfalar organik trafik almaz.

Hataya olası bir çözüm

Dan Shure, unutulan URL hatasıyla ilgili ilginç bir vaka paylaştı.

"Keşfedildi - ancak şu anda dizine eklenmemiş" ifadesi bir tür "kara listeye" bir URL koyabilir mi?

Bir müşterinin birkaç blog gönderisi ile olan garip ve ilginç bir şeyi paylaşacağımı düşündüm..

(1/5) (Konu açmaktan nefret ediyorum ama bunun biraz detaya ihtiyacı var)

— Dan Shure (@dan_shure) 8 Kasım 2021

URL'yi değiştirmek sorunu çözmek için yeterli gibi görünüyor .

Bu çözümü test eden tek kişi Dan Shure değildi. Frank Olivo, URL'lerini değiştirerek makalelerinin neredeyse ⅓'sini dizine ekledi!

Bu, denediğimiz 38 makalenin yaklaşık 12'sinde işe yaradı. Hepsi yeniden yayınladığımız gün indekslendi. Kalan makaleler neredeyse bir ay sonra hala "keşfedildi".

— Frank Olivo (@FrancoOlivo) 7 Aralık 2021

Bu URL'lerin düşük kaliteli URL kalıpları kapsamına girmesi olasıdır, bu nedenle Google bunları taramadı ve bu nedenle onları Google Arama Konsolunda "Keşfedildi - şu anda dizine eklenmemiş" olarak sınıflandırdı.

Google'ı, sayfayı yeni bir sayfa olarak ele almaya ve URL'yi değiştirerek yeniden taramaya ikna edebilirsiniz. Bu çözüm, sayfanın dizine eklenmesine yardımcı olabilir, ancak bu yalnızca bir geçici çözümdür. Sorunun tekrar olmasını engellemez. Google sorunu çözmeli ve hata kalıcı olarak düzeltilmelidir.

toparlamak

Makalede açıklandığı gibi, indeksleme ile ilgili ciddi bir sorun var. Önceki indeksleme hataları kadar belirgin ve muhteşem değil (örneğin, kurallılaştırmaya bağlı), ancak yine de herhangi bir web sitesini olumsuz etkileyebilir.

Bir Google çalışanıysanız ve sorunu araştırmak istiyorsanız, bu sorundan muzdarip bazı örnek URL'leri paylaşabilirim.

Sitenizde bu hatayı veya buna benzer bir indeksleme hatasını fark ettiniz mi? Bana bildirin!