Crawled - currently not indexed: Taranan Sayfa Neden İndekslenmez?
“Crawled - currently not indexed”, Googlebot'un sayfayı ziyaret ettiğini ancak sayfanın o anda arama indeksine eklenmediğini gösterir. Bu bir erişim kodu değildir: Google sayfayı almış olabilir, fakat içerik, canonical, tekrar veya kullanıcıya sunulan değer bakımından indekslemeye uygun bulmamış olabilir. Search Console durumu bir teşhis ipucudur; Google'ın iç kararının tek başına açıklaması değildir.
200 OK ama neden yine de indekslenmiyor?
HTTP 200, sunucunun isteği başarıyla yanıtladığını söyler. Belgenin anlamlı, bağımsız ve indekslenmeye değer olduğunu söylemez. Google, 200 dönen bir URL'nin gövdesinde hata veya boş sonuç görürse bunu soft 404 ya da düşük değerli bir sayfa olarak değerlendirebilir. Google'ın HTTP durum kodları dokümanı da 2xx yanıtın indeksleme garantisi olmadığını açıklar.
Ürün bulunamadığında uygulamanın ürettiği ilk HTML şuysa:
GET /urun/abc HTTP/1.1
HTTP/1.1 200 OK
Content-Type: text/html; charset=utf-8
<html>
<head><title>Ürün bulunamadı</title></head>
<body>
<h1>Bu ürün artık mevcut değil</h1>
<p>Aradığınız ürün bulunamadı.</p>
</body>
</html>
İstek teknik olarak başarılıdır; fakat URL'nin asıl amacı olan ürün belgesi yoktur. Ürün kaldırıldıysa gerçek 404 veya 410, kalıcı eşdeğeri varsa doğrudan o URL'ye 301, ürün hâlâ mevcutsa anlamlı ürün HTML'si döndürülmelidir.
Üç yanıtı yan yana okuyun
| Senaryo | HTTP status | İçerik | Google açısından risk | Önerilen aksiyon |
|---|---|---|---|---|
| Gerçek makale | 200 | Özgün başlık, gövde, kaynak ve iç linkler | Düşük teknik risk; kalite ayrıca değerlendirilir | Self-canonical, bağlamsal iç link ve sitemap |
| Boş şablon | 200 | “Yükleniyor” veya yalnızca ortak layout | Render sonrası da boş kalabilir | Ana içeriği server HTML'ye taşı |
| Soft 404 | 200 | “Bulunamadı” mesajı veya boş arama sonucu | Hata sayfası gibi algılanabilir | 404/410 ya da eşdeğere 301 |
| Kaldırılmış sayfa | 404/410 | Kaynak yok | İndekslenmez; eski linkler sorun yaratabilir | Sitemap ve iç linklerden çıkar |
| Kopya sayfa | 200 | Başka URL ile neredeyse aynı | Google farklı canonical seçebilir | Tek hedef seç, sinyalleri hizala |
Kaynak HTML ile son DOM aynı şey değildir
curl veya view-source, sunucunun gönderdiği ilk HTML'yi gösterir. Tarayıcı Elements paneli JavaScript çalıştıktan sonraki DOM'u gösterir. İlk HTML'de yalnızca Ürün yükleniyor bulunup ayrıntı sonradan ekleniyorsa iki aşamayı ayrı test edin. Google'ın JavaScript SEO temelleri Googlebot'un 200 sayfaları render kuyruğuna alabileceğini, bunun ilk yanıtın anlamlı olmasını gereksiz kılmadığını açıklar.
curl -sS -D /tmp/headers.txt https://intent.com.tr/urun/abc -o /tmp/page.html
head -n 12 /tmp/headers.txt
rg -n "<title|<h1|canonical|Ürün" /tmp/page.html
Discovered ile Crawled arasındaki fark
Discovered - currently not indexed, Google'ın URL'yi bildiğini fakat henüz crawl etmeyebileceğini anlatır. Crawled - currently not indexed ise URL'nin en az bir crawl sonrasında indekslenmediğini gösteren daha ileri bir teşhis aşamasıdır. Bu ayrım “Crawled olan kesinlikle kalitesizdir” anlamına gelmez:
Discovered → kaynak, iç link, crawl önceliği ve erişim
Crawled → bunlara ek olarak HTML, içerik değeri, canonical ve tekrar
İlk durum için Discovered - currently not indexed rehberine, ikinci durum için aşağıdaki kontrollerin tamamına bakın.
Uygulanabilir teşhis sırası
- İlk HTTP yanıtını ve header değerlerini kaydedin.
- Server HTML içinde title, tek H1, ana gövde ve önemli iç linkleri arayın.
- Canonical'ı sitemap ve iç linklerle karşılaştırın.
- Sayfanın bağımsız arama amacı ve özgün bilgi taşıyıp taşımadığını benzer URL'lerle okuyun.
- Search Console URL Inspection'ta seçili canonical, son crawl ve render edilmiş sayfayı inceleyin.
- Erişilebiliyorsa server loglarında Googlebot isteğini, yanıt süresini ve veri kaynağı hatalarını kontrol edin.
Bir sayfa 200 döndüğü hâlde indekslenmiyorsa ilk refleks status kodunu değiştirmek olmamalıdır. Önce URL'nin gerçek bir kaynağı temsil edip etmediğini, crawler'ın bunu ilk HTML'de görüp görmediğini ve daha güçlü bir eşdeğer bulunup bulunmadığını kanıtlayın.
Yayın sonrası kontrol listesi
[ ] HTTP 200 ve anlamlı server HTML
[ ] Gerçek kaynak yoksa 404/410 veya eşdeğere 301
[ ] Tek ve doğru canonical
[ ] Tek H1, açıklayıcı title ve description
[ ] İçerik ilk yanıtta görünür
[ ] En az bir bağlamsal inbound link
[ ] Aynı amacı hedefleyen URL'lerle karşılaştırma
[ ] Sitemap'te yalnızca tercih edilen canonical
Bu durum için evrensel bir “index iste” çözümü yoktur. Teknik erişim sağlandıktan sonra karar; içerik özgünlüğü, kullanıcı amacı, sayfanın site içindeki rolü ve Google'ın kendi değerlendirmesiyle birlikte verilir.