Google Dizine Ekleme (Index) Sorunları ve Kapsamlı Çözümleri
Web siteleriniz için uyguladığınız SEO çalışmalarının kritik aşamalarından biri, sayfalarınızın Google tarafından başarıyla dizine eklenmesi, yani indexlenmesidir. Dizine eklenme işlemi, sayfalarınızın arama motoru sonuçlarında görünür olmasını sağlayan temel mekanizmadır. Eğer sitenizde dizine eklenme (indexleme) sorunları mevcutsa, web siteniz arama sonuçlarında yer alamayacak demektir. Bu tür index hatalarıyla karşılaştığınızda hızlıca aksiyon almanız elzemdir. Bu makalede, karşılaşılan yaygın Google index sorunlarını ve bu sorunlara yönelik profesyonel çözümleri detaylıca ele alacağız.
Google Dizine Ekleme (Index) Sorunları Nasıl Tespit Edilir?
Google index sorunlarını çözüme kavuşturmadan önce, bu sorunların varlığını ve türünü doğru bir şekilde belirlemek gerekir. Web sitenizdeki index sorunlarını tespit etmek için öncelikle alanında lider araç olan Google Search Console'u kullanmalısınız. İzlemeniz gereken adımlar şunlardır:
İlk olarak, Google Search Console hesabınıza giriş yaparak ilgili profilinize erişim sağlayın.
Ardından, incelemek istediğiniz web sitenizin mülkünü seçin.
Sol menüden Dizine ekleme (Indexing) grubunu açın ve Sayfalar (Pages) raporuna girin. Bu rapor, Google'ın sitenizdeki hangi URL'leri dizine eklediğini ve hangilerini neden dışarıda bıraktığını detaylı olarak gösterir.
Sol menüdeki Dizine Ekleme (Indexing) grubu altındaki Site Haritaları (Sitemaps) bölümü, sitenizin haritasını Google'a bildirmenizi sağlar. Google, site haritaları üzerinden web sitenizin sayfalarını tarar ve tanır. Bu raporlar aracılığıyla sitenizdeki index hatalarını net bir şekilde tespit edebilir, hatta gerektiğinde sayfaları dizinden çıkarma talebinde bulunabilirsiniz.
Google Index Sorunları ve Detaylı Çözüm Yolları
Google index sorunlarının çözümünde ana rehberiniz, Dizine ekleme menüsü altındaki Sayfalar (eskiden Kapsam raporu) bölümüdür. Bu alanda, Search Console'un "Sayfalar" (Page indexing) raporu sayfaları iki üst grupta toplar: "Dizine eklendi" (Indexed) ve "Dizine eklenmedi" (Not indexed).
1. Dizine Eklendi
Bu kategoride listelenen URL'ler, Google tarafından herhangi bir problem tespit edilmeksizin dizine başarıyla eklenmiş demektir. Web sitenizin URL'leri bu bölümde yer alıyorsa, bu sayfalar için şu an itibarıyla özel bir işlem yapmanıza gerek yoktur. "Dizine eklendi" grubunda ise "Dizine eklendi ancak robots.txt tarafından engellendi" gibi uyarı niteliğinde durumlar yer alabilir.
2. Dizine Eklendi Ama Uyarılarla
Bu bölümdeki URL'ler Google dizinine eklenmiştir, ancak verimli bir dizinlenme için dikkate almanız gereken bazı uyarılar söz konusudur. Daha stabil bir indexleme performansı için bu uyarıları gözden geçirmelisiniz.
Robots.txt Tarafından Engelleniyor Olsa da Dizine Eklendi
Bu uyarı, robots.txt dosyanızda engellediğiniz halde bir URL'nin Google tarafından dizine eklenmiş olduğunu gösterir. Google, robots.txt ile engellenen bir sayfayı tarayamaz; bu yüzden sayfadaki meta etiketleri (noindex, canonical vb.) hiç göremez. Ancak başka sitelerden veya kendi sayfalarınızdan gelen bağlantılar sayesinde URL'yi keşfedip içeriğini görmeden yalnızca URL'yi dizine alabilir. "Dizine eklendi ancak robots.txt tarafından engellendi" uyarısının nedeni tam olarak budur ve bu URL'ler arama sonuçlarında genellikle açıklama metni olmadan görünür. Meta etiketlerin robots.txt talimatlarını geçersiz kılması ya da önceliklendirilmesi diye bir mekanizma yoktur; sayfanın dizinden çıkmasını istiyorsanız robots.txt engelini kaldırıp noindex etiketi kullanmalısınız.
Bu problemi çözmek için öncelikle robots.txt dosyasındaki URL yapısını dikkatlice inceleyin ve gerektiğinde güncelleyin. Robots.txt engeli ile noindex aynı anda kullanılmaz: sayfa robots.txt ile engellenmişse Googlebot sayfayı tarayamaz, üzerindeki noindex etiketini göremez ve sayfa dizinde kalmaya devam eder. Bir sayfanın dizinden çıkması için önce robots.txt'deki engeli kaldır, sayfaya "noindex" (meta robots etiketi veya X-Robots-Tag HTTP başlığı) ekle ve Googlebot'un sayfayı yeniden tarayıp noindex'i görmesini bekle. Sayfa dizinden düştükten sonra, gerçekten gerekiyorsa robots.txt engelini geri koyabilirsin. Ayrıca noindex direktifi robots.txt dosyasının içinde yazıldığında Google tarafından desteklenmez.
Robots.txt dosyası oluşturma ve düzenleme süreçleri hakkında daha fazla bilgi edinmek isterseniz, aşağıdaki kaynağı inceleyebilirsiniz:
İçerik Olmadan Dizine Eklendi
Search Console'da bu uyarıyı görmek, ilgili sayfaların dizine eklenmesine rağmen bu sayfalarda anlamlı bir kullanıcı içeriği bulunmadığı anlamına gelir. Bu durum, sayfaların gizli olması, 403 (Erişim Engellendi) yanıtı vermesi veya temelde boş bir sayfa olarak dizinde yer alması nedeniyle meydana gelebilir.
Çözüm için, uyarı aldığınız URL'leri tek tek ziyaret ederek içerik alanını kontrol edin. Eğer sayfalarda içerik eksikliği varsa, ilgili sayfalara güncel ve değerli içerikler eklemeli ve ardından dizine ekleme talebini yenilemelisiniz. Genellikle otomatik oluşturulan sistemlerde karşılaşılan bu uyarıyı, eğer sayfaların hata sonucu oluştuğunu tespit ederseniz, bu sayfaları kaldırabilir veya "noindex" etiketi ile işaretleyerek dizin dışı bırakabilirsiniz.
3. Dizine Eklenmedi
Bu bölümde, Google tarafından taranmış ancak çeşitli nedenlerle dizine eklenmemiş web sayfalarını bulabilirsiniz. Dizine ekleme ile ilgili sorunları olan sayfaları, bu bölümdeki spesifik uyarıları inceleyerek giderebiliriz. İşte bu bölümdeki temel problemler ve çözümleri:
Keşfedildi- Şu An Dizine Eklenmiş Değil
Bu, Google index sorunları içinde en sık karşılaşılan uyarılardan biridir. Bu uyarı altındaki sayfalar Google tarafından tespit edilmiş (keşfedilmiş) ancak henüz tarama adımı tamamlanmadığı için dizine eklenmemiştir. Başka bir deyişle, URL'leriniz sıraya alınmış ancak botlar henüz bu sayfalara ulaşamamıştır. Bu durum genellikle siteye toplu sayfa eklenmesi veya genel sayfa yüklenme hızının yavaş olması nedeniyle oluşabilir.
Bu uyarının ortadan kalkması için, ilgili URL'lerin teknik olarak kusursuz olduğundan emin olmalısınız. Özellikle mobil uyumluluk sorunları ve Önemli Web Verileri hataları gibi temel teknik aksaklıkların giderildiğinden emin olun.
Tarandı- Şu An Dizine Eklenmiş Değil
Bu uyarı, URL'nizin Google Index sürecinin ikinci aşamasını (tarama) tamamladığını, ancak henüz dizine eklenme adımına geçmediğini gösterir. Genellikle endişelenmenizi gerektiren bir durum değildir. Google bazen içeriğin kalitesini veya yeterliliğini değerlendirmek için bu aşamada beklemeye alabilir.
Google, sayfaların SEO açısından yeterince kaliteli ve özgün olmasını bekler. Kopya veya düşük kaliteli içerik olarak algılanan sayfalarda bu uyarı ile karşılaşabilirsiniz. Bu durumu gidermek için, etkilenen URL listesini belirli bir süre takip edin. Eğer sayfalarınız hala dizine eklenmezse, içerik kalitesini artırarak iyileştirmeler yapın ve ardından Google'a yeniden gönderme işlemi yapın.
Noindex Etiketi Tarafından Hariç Tutuldu
Bu uyarı, URL'ye eklediğiniz 'noindex' etiketini açıkça belirtir. Bu etiket ile Google'a, bu sayfaların arama sonuçlarında görünmesini istemediğinizi bildirmiş olursunuz. Sonuç olarak Google bu URL'leri görse bile dizine ekleme işlemini yapmayacaktır.
Problemi çözmek için, ilgili URL'yi inceleyin. Eğer sayfanızın indexlenmesini istiyorsanız, noindex etiketini HTML kodundan veya meta ayarlarından tamamen kaldırmalı ve ardından Google'a tekrar gönderim yapmalısınız.
Sayfa Kaldırma Aracı Tarafından Engellendi
Bu hariç bırakılma nedeni, Google Search Console'da bulunan URL Kaldırma Aracı'nın kullanılmasıyla ortaya çıkar. Bu araç ile dizinden kaldırılmasını istediğiniz URL'leri Google'a bildirirsiniz. Kaldırma talebi aktif olan URL'lerin 6 ay süreyle tekrar dizine eklenmesi engellenir.
Eğer bu hatayı görüyorsanız ve URL'lerin kalıcı olarak dizinden çıkarılmasını amaçlıyorsanız, noindex etiketi ekleyerek durumu kalıcı hale getirebilir ve Google'a tekrar bildirerek durumu teyit edebilirsiniz.
Erişim İzni Verilmemesi (403) Nedeniyle Engellendi
Bu uyarı, Google botlarının web sayfalarınıza erişim sırasında bir sorun yaşadığını gösterir. URL üzerinde 403 (Erişim Engellendi) hatası mevcutsa, Google bu sayfalara erişemediği için gerekli dizin ekleme işlemini gerçekleştiremez.
Çözüm için, ilgili sayfanın tarayıcınızda sorunsuz açılıp açılmadığını kontrol edin. Ayrıca, robots.txt dosyanızda yanlışlıkla bu sayfa veya dizin yolunun engellenmediğinden emin olun.
Yetkisiz İstek (401) Nedeniyle Engellendi
Bu durumda Google, URL'ye erişim talebinde bulunduğunda 401 (Yetkisiz Erişim) kodu ile karşılaşır. Erişim yetkisi olmadığı için sayfa hariç bırakılır ve dizine eklenmez. Google, bağlantılar aracılığıyla URL'yi keşfetmiş olsa bile 401 hatası nedeniyle tarama yapmaz.
Etkilenen URL'leri inceleyin. Genellikle bu tür hatalar, site yönetim paneli girişleri, üye alanları veya şifre korumalı sayfalar için geçerlidir. Google'ın indexlemesini istemediğiniz bu sayfalar için noindex yönergesini kullanmak en doğru yaklaşımdır. Ancak noindex etiketinin çalışması için bu sayfaların robots.txt ile engellenmemesi gerekir: robots.txt ile engellenen bir sayfayı Google tarayamadığı için üzerindeki noindex etiketini de göremez. Sitenizin tarama bütçesi açısından robots.txt'yi ise dizine eklenmesini istemediğiniz sayfalar için değil, hiç taranmasına gerek olmayan bölümler için kullanın.
Robots.txt Tarafından Engellendi
Bu hata, "Robots.txt tarafından engelleniyor olsa da dizine eklendi" uyarısının "Dizine Eklenmedi" kategorisindeki karşılığıdır. Robots.txt dosyanız aracılığıyla engellenen bir sayfa veya URL kategorisi söz konusudur.
Buradaki temel problem, tutarsız yapılandırmadır. Robots.txt ile engellenen bir sayfayı Google tarayamadığı için o sayfaya eklediğiniz noindex etiketini de göremez; başka sayfalardan bağlantı alan böyle bir sayfa, içeriği okunmadan dizine eklenebilir. Etkilenen URL'leri tek tek inceleyin. Google'da dizine eklenmesini kesinlikle istemediğiniz sayfalar için robots.txt engelini kaldırıp noindex etiketi eklemeniz, ardından Search Console'da düzeltmeyi doğrulamanız en güvenilir çözümdür.
Yönlendirmeli Sayfa
Web sitenizdeki bir URL taranırken, eğer ilgili sayfa başka bir URL yapısına yeniden yönlendiriliyorsa bu durumla karşılaşılır. Genellikle site adreslerinin HTTP’den HTTPS’e veya 'www'li ile 'www'siz sürümlerinin farklı çalışmasından kaynaklanır.
Bu uyarıyı düzeltmek için, web sitenizin sadece tek bir sürümünün aktif olduğundan emin olun (301 yönlendirmesi ile tek bir versiyona zorlayın). Eğer URL’si değişmiş eski bir sayfayı, yeni çalışan URL'ye yönlendirdiyseniz, bu yönlendirmenin doğru çalıştığından emin olun. Çok sayfalı sitelerde bu tür yönlendirmeleri tespit etmek zor olabileceği için, Screaming Frog aracının Inlinks menüsü bu tespitte size yardımcı olabilir.
Google Farklı Bir Sayfa Seçti
Bu uyarı, Google'ın sizin canonical olarak belirlediğiniz URL yerine, içeriği kendisi için daha değerli veya uygun gördüğü farklı bir URL'yi standart (canonical) olarak seçtiği anlamına gelir. Bu durumda, Google tarafından standart olarak seçilen URL'yi kabul etmeniz ve o versiyonu kullanmaya devam etmeniz en doğru yaklaşımdır. Alternatif olarak, Google'ın seçmediği içeriği daha güçlü hale getirmeyi de deneyebilirsiniz.
Doğru Standart Etikete Sahip Alternatif Sayfalar
Sitenizde birbirini tekrar eden (many-to-one) kopya sayfalar mevcut olduğunda bu uyarı ortaya çıkar. Google, bu durumda orijinal olan tek bir sayfayı seçer ve dizine ekler. Diğer kopyalar hariç bırakılır.
Search Console'da bu uyarıyı gördüğünüzde, sayfanızın canonical etiketini kontrol edin. Orijinal sayfa dizine eklendiği için ek bir işlem yapmanız zorunlu değildir. Bu uyarı genellikle "page/10/" veya "page/11/" gibi sayfalama numaralandırmalarında sıkça görülür.
Bu numaralandırılmış sayfaları dizin dışı bırakmak isterseniz, bu sayfaları 'noindex' olarak işaretleyebilirsiniz. Eğer WordPress altyapısı kullanıyorsanız, Rank Math SEO, All in One SEO Pack veya Yoast SEO gibi popüler eklentilerle bu ayarları kolayca yönetebilirsiniz.
Standart Etiketi Olmayan Kopya Sayfalar
Bu durumda Google, sayfanızı kopya, tekrarlanan veya büyük ölçüde benzer içerik olarak algılamıştır; çünkü bu sayfalar için standart bir canonical etiketi bildirilmemiştir. Etkilenen URL'leri kontrol ederek çözüme ulaşabilirsiniz; seçilen ana URL'lere canonical etiketleri eklenmelidir.
Google'ın her web sitesi için ayırdığı bir tarama bütçesi bulunmaktadır. Bu tür uyarılar tarama bütçenizi olumsuz etkileyebileceği için, konuyla ilgili aşağıdaki makaleyi incelemenizi şiddetle tavsiye ederiz:
Önemli Not: Search Console'daki "Dizine Eklenmedi" bölümündeki her uyarıyı bir hata veya acil düzeltilmesi gereken bir işlem olarak algılamamalısınız. Örneğin, sitenizdeki RSS Feed sayfaları veya AMP sayfaları, "Doğru standart etikete sahip alternatif sayfa" uyarısı altında görünebilir. Bu durum teknik olarak normaldir ve genellikle herhangi bir işlem yapmanızı gerektirmez.
4. Hatalar
Bu başlık altındaki sayfalar, ciddi hatalar nedeniyle Google tarafından taranmakta zorluk yaşamakta veya dizine eklenememektedir. Güncel Sayfalar raporunda bu durumlar ayrı bir "Hata" kategorisi olarak değil, "Dizine eklenmedi" grubunda birer neden olarak listelenir. Bu bölümdeki index sorunları ve çözümleri aşağıdadır:
Sunucu Hatası (5xx)
Bu URL'ler Google tarafından taranmaya çalışıldığında sunucu kaynaklı bir hata (5xx kodu) dönmektedir. Bu tür hatalar mevcut olduğunda Google, indexleme sürecine ara verir. Sunucu hataları, ziyaretçilerinizi de olumsuz etkilediği için sitenizin genel imajını zedeler. Index sorunları arasında en kritiği olup, ortaya çıktığında hızlıca çözülmesi sitenizin yararına olacaktır.
Sunucu hataları geçici olabilir. Ancak bu sorunlar tekrarlıyorsa, problemi çözmek için sunucu sağlayıcınızla (hosting firmanızla) iletişime geçerek destek almalısınız.
Gönderilen URL Noindex İşaretli
Google, noindex etiketi taşıyan bir sayfada dizine ekleme işlemi gerçekleştirmez. Bu hatayı çözmek için, ilgili URL'yi kontrol edin ve sayfanın meta etiketlerinden veya HTTP başlıklarından noindex direktifini kaldırmanız yeterlidir. Ardından Google'a bu URL'yi tekrar bildirerek dizine eklenmesini sağlayabilirsiniz.
Yeniden Yönlendirme Hatası
Bu durumdan etkilenen URL'ler ya çalışmayan bir sayfaya yönlendiriliyor ya da boş bir sayfaya düşüyor. Ayrıca, Google botları çok uzun yönlendirme zincirleri (çok sayıda ardışık yönlendirme) ile karşılaştığında tarama problemlerinden dolayı işlemi durdurabilir.
Çözüm için öncelikle URL kontrolü yapılmalıdır. Google'ın tarayıcıları varsayılan olarak bir zincirde en fazla 10 ardışık yönlendirmeyi (hop) takip eder; bu sayı aşılırsa içerik alınamaz ve Search Console'un sayfa dizine ekleme raporunda "yönlendirme hatası" olarak görünür. Limit crawler türüne göre değişebilir. Google yine de zinciri mümkünse tek adıma indirmeyi, olmuyorsa ideal olarak 3'ü geçmemeyi ve 5'in altında kalmayı öneriyor. Yönlendirme yapılan sayfaların durum kodları ve potansiyel hataları detaylıca incelenmelidir. Çalışmayan veya içi boş sayfalara yönlendirme yapılmamasına dikkat edin. Sorun çözüldükten sonra Google’a yeniden bildirim yapılmalıdır.
Gönderilen URL Bulunamadı (404) ve 4xx Kod Hataları
Web sitelerinde en sık rastlanan hatalardan biri olan 404 hatası, silinen, kaldırılan veya çalışmayan sayfaları dizine eklemek amacıyla Google'a gönderdiğinizde ortaya çıkar. 4xx durum kodu hatası veren URL'ler site haritanızda (sitemap.xml) bulunuyorsa, derhal kaldırılmalıdır.
Bu problemi çözmek amacıyla, konsolda bu hatadan etkilenen URL'leri inceleyin. Bu bağlantıların site haritanızda olmadığından ve site içi dahili bağlantılar içerisinde geçmediğinden emin olmak için SEO analiz araçları ile kontrol yapabilirsiniz. Artık kullanılmayan veya indexlenmesini istemediğiniz web sayfalarınız varsa, bunları site haritanızdan çıkararak sitemap.xml dosyanızı güncel, çalışan linklerle yeniden düzenlemeli ve ardından yeni dosyayı Google'a göndermelisiniz.
Google indexlenme sorunları (Sayfalar raporu hataları) hakkındaki makalemizin sonuna geldik. Eğer Google'da hızlı indexlenme süreçlerinde ek zorluklar yaşıyorsanız, aşağıdaki makalemizi incelemenizi öneririz:
Google indexlenme sorunları ile ilgili yaşadığınız herhangi bir spesifik problem varsa, sorularınızı doğrudan iletişim sayfamızdan bize iletebilirsiniz.
