Büyük Sitemdeki Yeni İçerikler Google Search Console'da Neden Sürekli 'Taranmadı: Keşfedilmedi' Olarak Kalıyor?

0

Merhaba forum sakinleri, kafayı yemek üzereyim! Çok büyük, binlerce sayfalık bir e-ticaret sitem var. Sürekli yeni ürünler, blog yazıları ekliyorum. search console'da 'Kapsam' raporuna baktığımda, eklediğim içeriklerin önemli bir kısmı 'Taranmadı: Keşfedilmedi' olarak gözüküyor. Site haritam düzenli olarak güncelleniyor, hiçbir teknik hata yok gibi görünüyor. Hatta manuel olarak indeksleme talep ettiğimde bile bazen günler, haftalar sürüyor. Bu durum organik trafiğimi çok kötü etkiliyor. google, sitemi neden keşfetmekte zorlanıyor? Bu sorunu çözmek için hangi adımları izlemeliyim, önceliklendirme nasıl yapılır?

Cevaplar (3)

0

Eyvallah dostum, anlıyorum derdini. Büyük sitelerdeki bu 'Taranmadı: Keşfedilmedi' durumu adeta bir Başa bela olabiliyor, insanı deli ediyor resmen! :D Sen şimdi site haritam düzgün, teknik hata yok diyorsun ama google'ın bu konuda kendi bir bildiği vardır derler ya, işte tam da öyle. Google'ın kaynakları sınırlı, devasa siteleri tararken bir önceliklendirme yapıyor. Senin siten ne kadar büyükse, Google'ın her sayfanı anında görmesi o kadar zorlaşır, bu da bir nevi Devede kulak kalma durumu oluşturuyor.

Öncelikle şu crawl bütçesi meselesine bir eğilmek lazım. Googlebot senin sitene her geldiğinde belirli bir süre ve sayfa sayısı kadarını tarar. Eğer sitende çok fazla gereksiz sayfa, düşük kaliteli içerik veya tekrar eden kısımlar varsa, Googlebot değerli sayfalarına ulaşana kadar vaktini buralarda harcayabilir. Bir nevi Ince eleyip sık dokumak gibi düşün bunu. O yüzden ilk olarak şu gereksiz veya düşük değerli sayfaları tespit edip ya noindex ile Google'a 'burayı boş ver' demek ya da doğrudan kaldırmak, 410 gitmek gerekiyor. Böylece Google'ın değerli sayfalarına daha fazla odaklanmasını sağlarsın.

İkinci önemli nokta iç bağlantı yapın. Googlebot bir sayfayı ne kadar çok iç bağlantıdan görürse, o sayfanın o kadar önemli olduğunu düşünür. Yeni eklediğin ürün veya blog yazılarına sitenin ana sayfalarından, ilgili kategorilerden veya popüler blog yazılarından bolca iç bağlantı vermen lazım. Bunu yaparken anahtar kelimelerle zenginleştirilmiş anchor textler kullanırsan, Google hem konuyu daha iyi anlar hem de sayfayı daha hızlı keşfeder. Yani bir nevi Yolu gösteriyorsun Google'a.

Bir de site hızı var tabii. Senin siten ne kadar hızlı açılırsa, Googlebot o kadar çok sayfayı kısa sürede tarayabilir. sunucu yanıt süresi, görsel optimizasyonu, CSS/JS sıkıştırması gibi konulara eğilmen şart. Hızlı bir site, Googlebot için Balık kılçığı gibi kaygan olur, çabucak bitirir işini. Ayrıca, search console'daki 'Tarama İstatistikleri' raporuna bakarak Google'ın siteni nasıl taradığını, en çok hangi sayfalarda vakit geçirdiğini iyi analiz etmelisin. Oradaki veriler sana yol gösterecektir. Unutma, bu bir süreç, sabır işi. Acele işe şeytan karışır derler, adım adım ve düzenli olarak bu optimizasyonları yaparsan, er ya da geç Google yeni içeriklerini daha hızlı keşfetmeye başlayacaktır. Bol şanslar!

0
Bee profil fotoğrafı Bee Yönetici Platform Uzmanı

Büyük ölçekli e-ticaret sitelerinde 'Taranmadı: Keşfedilmedi' durumu, genellikle crawl bütçesi optimizasyon eksikliklerinden kaynaklanır. Googlebot'un sınırlı kaynaklarla sitenizi taraması, önceliklendirme mekanizmalarını doğru kurgulamanızı gerektirir. Sitenizin binlerce sayfaya sahip olması, bu durumu daha da kritik hale getirmektedir. Site haritanızın güncel olması ve teknik hataların bulunmaması, keşfedilme sürecinin garanti olduğu anlamına gelmez; bu, yalnızca bir başlangıç noktasıdır.

İlk olarak, sitenizin Crawl bütçesi kullanımını detaylıca analiz edin. search console'daki 'Tarama İstatistikleri' raporunu inceleyerek Googlebot'un hangi sayfalarda ne kadar zaman harcadığını, günlük tarama kotasını ve sunucu yanıt sürelerini gözlemleyin. Yüksek sunucu yanıt süreleri veya yavaş sayfa yüklemeleri, Googlebot'un tarayabileceği sayfa sayısını direkt olarak düşürür. Bu nedenle, sunucu performansınızı, CDN kullanımınızı ve genel sayfa hızınızı (core web vitals metrikleri dahil) optimize etmek hayati öneme sahiptir.

İkinci olarak, sitenizdeki Düşük değerli veya yinelenen içerikleri tespit edin. Stokta olmayan veya geçici olarak kaldırılan ürün sayfaları, filtrelenmiş arama sonuçları sayfaları veya çok benzer içeriklere sahip sayfalar, crawl bütçenizi gereksiz yere tüketebilir. Bu tür sayfalar için stratejik kararlar alın: eğer içerik geçiciyse 410 Gone durumu, kalıcı olarak kaldırıldıysa 301 yönlendirmesi veya google'ın taramasını engellemek için Noindex etiketi kullanın. robots.txt dosyanızı da gereksiz dizinlerin taranmasını engellemek amacıyla optimize edin, ancak kritik sayfaları yanlışlıkla engellemediğinizden emin olun.

Üçüncü ve belki de en kritik adım, Iç bağlantı stratejinizi güçlendirmektir. Yeni ve önemli içeriklerinize sitenizin otoriter ve sık taranan sayfalarından (ana sayfa, kategori sayfaları, popüler blog yazıları) güçlü iç bağlantılar sağlayın. Bu bağlantılar, Googlebot'a yeni sayfaların önemini ve konumunu açıkça bildirir. Anchor text'leri açıklayıcı ve anahtar kelime açısından zengin tutarak hem kullanıcı deneyimini hem de Googlebot'un bağlamı anlamasını iyileştirin. Ayrıca, site haritanızın doğru olduğundan ve yalnızca dizine eklenmesini istediğiniz kanonik URL'leri içerdiğinden emin olun. Büyük sitelerde bir XML site haritası indeksi kullanmak, birden fazla site haritasını yönetmek için etkili bir yöntemdir.

Pro İpucu: Büyük sitelerde özellikle yeni ve kritik içeriklerin daha hızlı keşfedilmesi için, bu içeriklere özel bir RSS beslemesi (feed) oluşturup bunu google search console'a site haritası olarak göndermeyi düşünebilirsiniz. Bu, Google'a yeni içerikler hakkında anında bir sinyal göndermenin etkili bir yoludur.

0

Vay arkadaş, 'Taranmadı: Keşfedilmedi' mi? google'ın da bazen Kör göze parmak misali davrandığı anlar oluyor işte. Sanki sitenin büyüklüğüne göre bir lütuf dağıtıyor da, senin sayfan o sıraya giremiyor gibi. 'Ben site haritası gönderdim, neyime yetmiyor?' diye hayıflanmakta haklısın, ama Google'ın kendine göre bir Düzenin çarkı var, o çarkı doğru yağlamak lazım.

Şimdi şöyle bir düşünelim: Senin siten devasa bir kütüphane gibi. Googlebot da bu kütüphaneye giren bir araştırmacı. Eğer kütüphanenin her yerinde yığınla eski gazete, yırtık pırtık dergiler varsa, araştırmacı yeni çıkan, değerli kitaba ulaşana kadar epey bir vakit kaybeder. İşte o gereksiz sayfalar, eski ürünler, bitmiş kampanyalar... Bunlar Googlebot'un Önünde dağ gibi duran engeller. Ya bunları kaldıracaksın (410 Gone), ya da Google'a 'buraya bakma' diyeceksin (noindex). Yoksa Googlebot, boşu boşuna oralarda dolanıp, asıl işini yapmaya fırsat bulamıyor.

Bir de şu var: Googlebot da insan gibi, yani bir nevi yapay zeka da olsa, Gözden ırak olan gönülden de ırak olur misali çalışıyor. Yeni eklediğin içeriği sitenin taa dip köşesine saklarsan, ona ulaşacak yeterli iç bağlantı vermezsen, Googlebot'un onu keşfetmesi zorlaşır. Düşünsene, yeni bir ürünün var ama ana sayfada, ilgili kategorilerde, hatta popüler blog yazılarında ona hiç atıfta bulunmuyorsun. E Google da haklı olarak 'Demek ki çok önemli değil' diye düşünüyor. O yüzden yeni ve önemli içeriklerine sitenin en güçlü sayfalarından bol bol link ver ki, Google da 'Ha, burada önemli bir şey var!' desin ve Koşa koşa gelsin.

Son olarak, site hızın da çok önemli. Googlebot senin sitene her geldiğinde belirli bir 'mesai' harcıyor. Eğer siten yavaşsa, her sayfayı taraması uzun sürer ve mesai bittiğinde daha az sayfa taramış olur. Yani bir nevi Ayağını yorganına göre uzatmak gibi. Hızlı yüklenen bir site, Googlebot için daha verimli bir ziyaret demek. O yüzden sunucu hızından görsel optimizasyonuna kadar her şeye dikkat etmelisin. Yoksa Google da senin gibi 'Ay ne ağır siteymiş, sonra gelirim ben' deyip giderse, içeriklerin keşfedilmeyi bekler durur. Hadi bakalım, kolay gelsin!