
İndekslenmeyen sayfayı keşfedilmedi diye kapatmak, botun parametre ve kopya URL'lerde vakit yitirdiğini gizler. Tarama bütçesi, Googlebot'un hangi adrese öncelik vereceğini yönetmektir. Bu rehber gereksiz URL'yi taramadan nasıl uzak tutacağınızı somut adımlarla anlatır.
Sayfa indekslenmediğinde ilk refleks genelde “Google henüz keşfetmedi” demektir. Search Console’da benzer bir etiket görünür; site haritası yeniden gönderilir ve beklenir. Oysa parametreli kataloglarda ve şişmiş arşivlerde asıl darboğaz keşif değil, tarama bütçesidir. Googlebot her adresi eşit süreyle gezmez. Test sayfası, sıralama parametresi, yazdırma kopyası ve oturum kimliği aynı metni onlarca URL’de çoğaltırsa bot vakit kaybeder; hizmet ve ürün sayfaları sıraya giremez. Bu rehber indekslenmeme sorununu keşif diye kapatmak yerine, gereksiz URL’yi bot yolundan nasıl çıkaracağınızı gösterir.
Tarama bütçesi nedir, ne değildir
Tarama bütçesi, Googlebot’un sitenizi belirli bir dönemde ne kadar tarayacağına dair pratik bir sınırdır. Google size bu sınırı sabit bir pano sayısı olarak vermez. Yine de botun zamanı sonsuz değildir. Sunucu yanıtı ağırlaşırsa, kopya adres çoğalırsa veya iç bağlantı her varyanta giderse önemli sayfa geriye düşer.
Bu kavram bir sıralama vaadi değildir. Daha çok tarama, daha iyi sıra anlamına gelmez. İşlevi basittir: sınırlı isteği, kullanıcının arama niyetini karşılayan kanonik sayfalara yönlendirmek; niyeti taşımayan filtre ve kopya URL’yi taramadan uzak tutmak. Keşfedilmemiş bir yazı bazen haritada yoktur; bazen haritadadır ama bot hâlâ renk filtresinin yirmi varyantını çekmektedir.
İki işi karıştırmayın. İndeks, seçilen URL’nin dizin adayı olmasıdır. Tarama, o adrese isteğin fiilen gitmesidir. Taranmaması gereken adres indeks adayı da olmamalıdır. Taranması gereken adres ise iç link, harita ve kanonik sinyalle tek ve net durmalıdır.
Keşfedilmedi kaydı neden asıl sorunu örtüyor
Search Console’da keşfedildi ama dizine eklenmedi benzeri bir satır görününce ekip keşfi artırmaya yönelir. Yeni harita, tek URL denetimi, bazen de aynı isteğin tekrarı. Bu adımlar haritada gerçekten eksik bir adresi tamamlar. Botun gördüğü halde öncelik vermediği adresi çözmez.
Keşif, bir URL’nin varlığının bilinmesidir. Tarama, o adrese gidilmesidir. Dizine ekleme ayrı bir karardır. Üçü aynı anda bozulabilir. Parametre patlaması olan bir sitede bot binlerce adresi biliyor olabilir; ana kategori ve ürün detayı yine seyrek ziyaret edilir.
İndekslenmedi kaydını keşif diye kapatmak, botun zaten yanlış adreste vakit geçirdiği gerçeğini gizler.
Önce sorun sorun: Bu URL taranmayı hak ediyor mu? Hak etmiyorsa keşfi artırmak israfı büyütür. Hak ediyorsa kuyruğa neden giremiyor bakın. Yavaş yanıt, kopya kümesi, zayıf iç link veya haritada gürültü aynı etiketi üretebilir.
Somut bakış şudur. Yeni hizmet sayfası dizinde yoksa önce o sayfanın tek temiz adresi var mı kontrol edin. Ardından botun son dönemde hangi yolları gezdiğine bakın. Test alt alanı, yazdırma kopyası ve sıralama parametresi listenin başındaysa sorun keşif değil dikkat dağınıklığıdır.
Googlebot’un vaktini yiyen URL türleri
Botun zamanını yiyen adresler çoğu sitede aynı ailelerdendir. Hepsi “bir sayfa daha” gibi durur; birlikte ele alınınca tarama kuyruğunu şişirir.
- Filtre ve sıralama parametreleri: renk, beden, fiyat aralığı, “en yeni” gibi kombinasyonlar aynı listeyi yeni URL gibi sunar.
- Oturum ve izleme ekleri: oturum kimliği, tıklama kimliği veya iç linke yapışmış UTM, aynı içeriği ayrı adres yapar.
- Site içi arama sonuçları: her sorgu yeni bir tarama adayı üretir; kuyruk hızla açılır.
- Yazdır, paylaş, önizleme kopyası: aynı metnin ikinci kabuğu bot için ayrı iş kalemidir.
- Test, staging ve eski CMS kopyası: şifresiz kaldığında canlı siteyle rekabet eder.
- Sonsuz takvim, etiket ve sayfalama kapanı: bitmeyen bir sonraki sayfa, tarama isteğini emer.
- Sepet, hesap ve teşekkür sayfaları: herkese açık linklenirse keşif ve tarama yolu olurlar; nadiren arama sonucu olmayı hak ederler.
E-ticarette asıl değer çoğu zaman temiz kategori ve ürün detay sayfası üzerindedir. Filtre, müşteriye yardım eder; her kombinasyonu tarama adayı yapmak zorunda değilsiniz. KepezWeb e-ticaret yazılarında önce vitrin linkinin hangi adresi ürettiğine bakmayı önerir; karttan kartta çoğalan parametreyi varsayılan yol saymaz.
robots.txt, noindex ve canonical’ı karıştırmayın
Üç araç aynı kapıyı kapatmaz. Yanlış seçim tarama bütçesini korumaz; bazen indeksten çıkması gereken sayfayı da taranamaz hale getirir. noindex’in işe yaraması için botun sayfayı görmesi gerekir. robots.txt ile yolu kapatırsanız o sinyal okunmayabilir.
| Yöntem | Taramaya etkisi | Dizine etkisi | Ne zaman düşünülür |
|---|---|---|---|
| İç linki kesmek | Keşfi ve tekrarı azaltır | Yeni kopya üretimini durdurur | Filtre, UTM, yazdırma, arama sonucu |
| robots.txt | Yolu taramaya kapatır | İçerik çekilmez; bağlantı varsa çıplak URL kalabilir | Admin, test, sonsuz parametre deseni |
| noindex | Sayfa taranır | Dizin dışı sinyalidir | Teşekkür, ince etiket, kopya arşiv |
| canonical | Varyant taranabilir | Tercih edilen adresi önerir | Aynı içeriğin parametreli kopyası |
Kuralı sade tutun. Botun hiç görmesini istemediğiniz patlayan yollar için taramayı kesin. Dizinden düşmesini istediğiniz ama hâlâ içerde duran sayfalar için taramaya izin verip noindex kullanın. Gerçek kopyada tercih edilen adresi canonical ve iç linkte aynı tutun. Üçünü üst üste rastgele yığmak sinyali bulanıklaştırır.
Parametre, filtre ve oturum adreslerini kesmek
Parametre her zaman düşman değildir. Sayfalama veya tek anlamlı bir durum parametresi bazen gerekir. Sorun, iç navigasyonun her tıklamada yeni tarama adayı üretmesidir. Bot, sizin vitrinde gösterdiğiniz linki izler.
- Şablonda yalnızca temiz, kanonik yolu verin. Sıralama ve izleme ekini iç menüye, karta ve kırıntıya koymayın.
- Filtreyi kullanıcı aracı olarak bırakın; her kombinasyonu ayrı bir keşif kapısı yapmayın. Özellikle birden fazla filtrenin çarpımı kontrolsüz büyür.
- Site içi arama sonuçlarını noindex tutun ve siteden geniş şekilde linklemeyin.
- Kampanya etiketini iç linkte taşımayın. Paylaşılacak adres temiz kalsın; ölçümü sunucu veya etiket tarafında ayırın.
- Site haritasına yalnız tercih edilen URL’leri koyun. Harita keşif listesidir, parametre arşivi değil.
- Bilinen patlama desenini robots.txt ile tarama dışı bırakmayı değerlendirin. Bu, noindex yerine geçerli değildir; yalnızca botun o kuyruğa girmesini keser.
Uygulamada en ucuz kazanım iç linktir. Kart, sayfalama ve ilgili ürün bloğu parametreli adrese gidiyorsa haritayı sadeleştirmek yetmez. Bot her gün o bloğu yeniden yürür. Adresi tekilleştirmeden “keşfi hızlandırma” isteği, aynı kopyayı daha sık taratır.
Test, kopya ve geçici sayfaları bot yolundan çıkarmak
Canlı siteyle aynı içeriği taşıyan ikinci bir ev, tarama bütçesini sessizce böler. Staging, tasarım önizlemesi, eski yazılım kopyası ve “deneme” alt alanı şifresiz ve indekse açık kaldığında Googlebot iki evi birden gezer.
Yayına çıkmadan önce şu üç kontrolü alışkanlık yapın:
- Önizleme ve test ortamı kimlik doğrulamasının arkasında mı, yoksa yalnızca bir meta etikete mi güveniyorsunuz?
- Eski alan adı, alt klasör veya kopya tema hâlâ içeriden link alıyor mu?
- Geçici kampanya, yazdırma ve PDF HTML kabuğu haritaya düşmüş mü?
Yönlendirme de tarama ister. Zincir uzadıkça bot asıl içeriğe geç ulaşır. Taşınan adres varsa hedefi tek hop’ta verin; test kopyasını canlıya 301 ile “bir süre daha” açık tutmak kuyruğu uzatır. Amaç botu cezalandırmak değil, ona canlı ve tek adresi göstermektir.
Search Console’da tarama israfını okumak
Search Console bir günlük değildir; yine de israfın izini bırakır. Dizine eklenmeyen örnek URL’lerde parametre, önizleme ve arama sonucu kalıpları tekrar ediyorsa keşif eksiği değil adres şişmesi arayın. Haritada olan ama örnek taramada görünmeyen asıl sayfalar da aynı tabloya işaret eder: bot başka yerde meşguldür.
KepezWeb, bu okumayı Google Search Console indeksleme ayrımıyla anlatır: keşif, tarama ve dizin ayrı kapılardır. Haritayı yenilemek üçünü birden onarmaz. Önce örnek URL’leri ailelerine ayırın. Aynı desenden onlarca satır varsa çözüm yeni istek değil, o deseni üretmeyen şablondur.
Sunucu tarafında yavaş veya hatalı yanıt da bütçeyi yer. Bot tekrar denemek zorunda kalır. Temiz URL listesi, sağlıklı yanıt ve sade iç iskelet birlikte çalışır. Biri eksikse diğer iki düzeltme yetmeyebilir.
Teknik tarama düzeni çoğu sitede içerik işinden önce gelir. Hangi URL ailesinin kuyruğu tıkadığını ayıklamak, SEO hizmeti içinde harita gönderiminden daha sık tekrarlanan bir bakımdır.
Sıkça Sorulan Sorular
Tarama bütçesi yalnızca büyük siteleri mi ilgilendirir?
Hayır. Küçük sitede de test kopyası, parametreli arşiv ve iç arama aynı kuyruğu bozar. Fark, israfın daha çabuk görünmesidir; kural değişmez: botun zamanı önemli adrese gitsin.
robots.txt ile noindex aynı işi görür mü?
Görmez. robots.txt taramayı keser; noindex için sayfanın çekilmesi gerekir. Dizinden düşürmek istiyorsanız yolu kapatmadan noindex verin. Botun hiç girmesini istemiyorsanız taramayı kesin ve o adresi iç linkten de çıkarın.
Canonical tarama bütçesini tek başına kurtarır mı?
Kurtarmaz. Canonical tercih sinyalidir; bot varyantı yine tarayabilir. Asıl tasarruf, varyantı iç link ve haritada üretmemektir. Canonical, kalan kopyayı asıl adrese bağlamaya yarar.
Site haritasındaki her URL taranır mı?
Hayır. Harita aday listesidir, tarama emri değildir. Gürültülü harita keşfi şişirir, önceliği netleştirmez. Yalnız kanonik ve yayımlanmış sayfaları koyun; parametre ve test adresini listeden silin.
Sonuç ve Sonraki Adım
Tarama bütçesini parametre ve kopya URL’lerden ayırmak teknik bir düzen işidir. KepezWeb, keşif etiketini yenilemekle yetinmez; botun izleyeceği adresi sadeleştirir. Bu ayrımı sitenizde netleştirmek istiyorsanız teklif alın; hangi URL grubunun kuyruğu tıkadığını birlikte çıkaralım.


