Googlebot
TL; DR
Googlebot, bir sayfadan diğerine bağlantıları izleyerek ve bunları alaka düzeyine göre dizine ekleyerek web sitelerini otomatik olarak taramak için kullanılan Google tarayıcısıdır.
Googlebot nedir?
Googlebot, adından da anlaşılacağı gibi, web sitelerini taramaktan sorumlu Google tarayıcısıdır (bot olarak da adlandırılır). Googlebot, aşağıdakilere verilen genel addır:
- Masaüstünde bir kullanıcıyı simüle eden bir masaüstü tarayıcısı (Googlebot Desktop).
- Bir mobil cihazda (Googlebot Akıllı Telefon) bir kullanıcıyı simüle eden bir mobil tarayıcı.
Googlebot sitenize nasıl erişir?
Googlebot'un amacı, bağlantılar aracılığıyla tüm web sitelerini ve sayfalarını taramak ve taramaktır: temel olarak, Googlebot tüm yeni veya güncellenmiş içeriği bulup okur ve alaka düzeyine göre dizine ekler. Google tarayıcıları tarafından oluşturulan ziyaretler, yönlendiren günlüklerinde görüntülenebilir ve bunlar robots.txt dosyasında belirtilmelidir.
Googlebot, bir siteden mümkün olduğunca çok sayfa tarar, ancak web sitesi sahibi tarafından seçilen reddedilen bağlantılara da uyar. Google'dan bir web sitesini (yeniden) dizine eklemesini istemek için lütfen şu genel yönergeleri dikkate alın: