Arama motoru nedir, nasıl çalışır: crawl, index, rank

Arama motoru nedir sorusunun en kısa cevabı, web'deki sayfaları bulan, anlayan, saklayan ve bir sorguya en uygun olanları sıralayarak sunan bir sistemdir. Ama bir web sitesi sahibi için bu tanım tek başına yetmez; önemli olan, sitenin bu zincirin hangi halkasında takılabileceğini bilmektir. Bu yazı, Google'ın kendi belgelerine dayanarak arama motorunun üç temel aşamasını, yani tarama, dizine ekleme ve sonuçları sunmayı sade bir dille anlatıyor ve her aşamada sitenizde neyi kontrol etmeniz gerektiğini gösteriyor. Arama motoru nedir sorusunu teknik bir ekibe değil, karar veren kişiye anlatmak için yazıldı.

Arama motoru nedir: üç aşamalı bir zincir

Google Search Central'ın arama nasıl çalışır rehberi süreci üç aşamada tanımlar. Tarama aşamasında, tarayıcı adı verilen otomatik programlar internette bulunan sayfalardan metin, görsel ve videoları indirir. Dizine ekleme aşamasında sayfanın içeriği analiz edilir ve bilgiler büyük bir veri tabanında saklanır. Sonuçları sunma aşamasında ise bir kullanıcı arama yaptığında, sorguyla ilgili sayfalar bulunur ve sıralanarak gösterilir.

Bu üç aşama sıralıdır: taranmayan bir sayfa dizine eklenemez, dizinde olmayan bir sayfa da sonuçlarda görünemez. Bu yüzden bir sayfanın aramada görünmediği durumlarda sorulacak ilk soru "neden sıralanmıyor" değil, "zincirin hangi halkasında kaldı" olmalıdır. Google ayrıca bir sayfanın taranacağını, dizine ekleneceğini ya da gösterileceğini garanti etmediğini açıkça belirtir; kurallara uyan bir site için bile bu geçerlidir.

Rehberde altı çizilen bir başka nokta, Google'ın bir siteyi daha sık taramak ya da daha üst sıraya koymak için ödeme kabul etmediğidir. Reklamlar ayrı bir sistemdir ve organik sonuçları satın almak mümkün değildir. Bu, bir SEO çalışmasının neden zaman aldığını da açıklar: sıralama, bir ödeme değil, sayfanın zincirin her aşamasından başarıyla geçmesinin sonucudur.

Crawl: arama motoru sayfaları nasıl bulur

Tarayıcılar yeni sayfaları çoğunlukla bağlantılar üzerinden bulur: bilinen bir sayfadan yeni bir sayfaya verilen bağlantı, keşfin en yaygın yoludur. Site haritaları da bu keşfe yardımcı olur. Google'ın site haritası belgesine göre site haritası, sitedeki önemli sayfalar ve dosyalar hakkında arama motoruna bilgi veren bir dosyadır; özellikle büyük, yeni ya da az dış bağlantısı olan siteler için yararlıdır.

Taramayı kontrol etmenin temel aracı robots.txt dosyasıdır. Burada sık yapılan bir hata var: robots.txt, bir sayfayı Google'dan gizlemenin yolu değildir. Google'ın belgelerine göre robots.txt taramayı engeller ama dizine eklemeyi engellemez; başka sitelerden bağlantı alan bir URL, taranmadan da dizinde görünebilir. Bir sayfayı aramadan tutmak için noindex kullanmak ya da sayfayı parola ile korumak gerekir.

Bu aşamada sitenizde kontrol edilecekler şunlardır: önemli sayfalara iç bağlantı var mı, site haritası güncel mi ve yalnızca dizine eklenmesi istenen sayfaları içeriyor mu, robots.txt yanlışlıkla önemli bir bölümü engelliyor mu. Çok dilli sitelerde site haritası mimarisinin nasıl kurulacağını çok dilli sitemap yazımızda ayrıca ele aldık.

Index: dizine ekleme ve kanonik sürüm

Taranan bir sayfa, dizine eklenmeden önce analiz edilir: metin, başlıklar, görseller ve sayfanın yapısı incelenir. Bu aşamanın önemli bir parçası, yinelenen içeriğin ayıklanmasıdır. Google, birbirine çok benzeyen sayfaları gruplar ve bunlardan birini kanonik, yani sonuçlarda temsil edilecek ana sürüm olarak seçer. Bir sitede aynı içeriğin birkaç farklı adreste bulunması, arama motorunun sizin tercih etmediğiniz sürümü seçmesine yol açabilir.

Dizine ekleme sorunları çoğu zaman sessizdir: sayfa yayındadır, kullanıcılar ona ulaşabilir, ama aramada görünmez. Bunu görmenin yolu Search Console'daki sayfa dizine ekleme raporudur. Bu rapordaki durumları okumayı ve düzeltme sırasını indeksleme sorunları yazımızda adım adım anlattık.

Rank: sonuçlar nasıl sıralanır

Son aşamada, bir kullanıcı sorgu yazdığında arama motoru dizinde eşleşen sayfaları arar ve en alakalı ve kaliteli olduğunu değerlendirdiği sonuçları gösterir. Google'ın rehberine göre bu değerlendirmede kullanıcının konumu, dili ve cihazı gibi birçok etken rol oynar. Aynı sorgu farklı şehirlerde ya da farklı cihazlarda farklı sonuçlar verebilir; bu yüzden tek bir bilgisayardan yapılan elle kontrol, sıralama hakkında güvenilir bir ölçüm değildir.

Sonuç sayfası da yalnızca on mavi bağlantıdan oluşmaz. Sorgunun niyetine göre yerel sonuçlar, görseller, videolar ya da yapay zeka destekli özetler gibi farklı özellikler görünebilir. Arama motoru optimizasyonunun AI arama döneminde neye dönüştüğünü SEO nedir yazımızda tartıştık.

Sıralamada kullanılan etkenlerin tam listesi ve ağırlıkları kamuya açık değildir; Google yalnızca genel ilkeleri ve yönergeleri paylaşır. Bu yüzden "şu etkeni düzeltirseniz birinci sıraya çıkarsınız" türünden iddialara şüpheyle yaklaşmak gerekir. Güvenilir olan yaklaşım, sayfanın kullanıcının sorusuna gerçekten cevap vermesini, teknik olarak erişilebilir olmasını ve konuyla ilgili deneyim ve uzmanlığı açıkça göstermesini sağlamaktır.

Arama motorunun bakış açısını anlamanın pratik bir yolu da kendi sitenizi onun gözüyle incelemektir. Search Console'daki URL denetimi aracı, Google'ın belirli bir sayfayı nasıl gördüğünü, en son ne zaman taradığını ve hangi kanonik sürümü seçtiğini gösterir. Bu bilgi, bir sayfanın neden aramada görünmediğini tahminle değil, veriyle açıklamanızı sağlar.

Bir sayfanın dizinde olması ile belirli bir sorguda görünmesi de farklı şeylerdir. Dizindeki bir sayfa, hiçbir sorgu için yeterince alakalı bulunmazsa sonuçlarda neredeyse hiç görünmeyebilir. Search Console'daki performans raporu, bir sayfanın hangi sorgularda gösterim aldığını ortaya koyar; gösterim yoksa sorun çoğu zaman teknik değil, içerikle sorgu arasındaki uyumsuzluktur.

Site sahibi için pratik kontrol listesi

Zinciri bir kontrol listesine çevirmek, sorunların hangi aşamada olduğunu hızlıca bulmayı sağlar. Tarama için: önemli sayfalar iç bağlantılarla erişilebilir mi, robots.txt ve sunucu yanıtları taramaya izin veriyor mu. Dizine ekleme için: sayfalar noindex taşımıyor mu, kanonik etiketler doğru sürümü gösteriyor mu, Search Console'da beklenmeyen hariç tutulma var mı. Sunma için: sayfa, hedeflenen sorgunun niyetini gerçekten karşılıyor mu ve rakip sonuçlardan ne açıdan farklı.

Bu listenin ilk iki bölümü teknik altyapıyla ilgilidir ve çoğu zaman içerik çalışmasından önce çözülmesi gerekir; iyi bir içerik, taranamayan ya da dizine eklenemeyen bir sayfada hiçbir sonuç üretmez. Bu teknik temeli kurmak ve düzenli olarak denetlemek, teknik SEO hizmetimizin çıkış noktasıdır.

Kaynaklar

• Google Search Central — Google Arama nasıl çalışır: tarama, dizine ekleme ve sonuçları sunma aşamaları.
• Google Search Central — robots.txt'ye giriş: robots.txt'nin taramayı nasıl kontrol ettiği ve sınırları.
• Google Search Central — Site haritası nedir: site haritalarının ne zaman yararlı olduğu.