Tarama ve Dizine Ekleme: Sitenizi Dizine Eklemek için Google Arama Nasıl Yapılır?Yayınlanan: 2022-08-04
Tarama ve dizine ekleme, Google'ın sitenizin içeriğini nasıl analiz edip yorumladığıdır ve web sitenizin SEO'sunu etkileyebilir.
Mumbai'deki SEO şirketi tarafından paylaşılan bu gönderi, tarama ve dizine ekleme arasındaki farkı, web sitenizin dizine eklenebilirliği ve taranabilirliği üzerindeki etkileri ve her ikisini de nasıl artırabileceğinizi anlamanıza yardımcı olacaktır.
Emeklemenin nesi var?
Tarama, arama motorlarının internette yeni içerik bulmasını sağlayan bir yöntemdir. Bunu başarmak için, yenilerine endekslenmiş web sitelerine köprüleri izleyen tarama botlarını kullanırlar.
Her gün binlerce web sitesi oluşturulduğundan veya güncellendiğinden, tarama, tekrar tekrar tekrarlanan sürekli bir süreçtir. Google Web Yöneticisi Trend Analisti Martin Splitt, tarama sürecini çok basit bir şekilde açıklıyor:
"Bazı URL'lerle başlıyoruz ve oradan bir bağlantı alıyoruz. Bu, bir seferde ve aşağı yukarı web (bir) sayfasında gezinmedir.”
Tarama, sürecin sadece başlangıç aşamasıdır. Bir sonraki adım, sıralamanın yanı sıra dizine ekleme (farklı sıralama algoritmalarından geçen sayfalar) ve ardından arama sonuçlarını sunmaktır.
Burada biraz derine inelim ve emekleme sürecini inceleyelim.
"Arama motoru tarayıcısı" nedir?
Arama motoru tarayıcısı (tarama botu veya web örümceği olarak da bilinir), içerikleri aracılığıyla web sitelerini tarayan, içerik için tarayan ve ardından içeriği dizine eklemek için bilgileri toplayan bir programdır.
Bir tarayıcı köprüler aracılığıyla web sitesine ulaştığında, içeriğine bakar ve bağlantılar, HTML, CSS, JavaScript dosyaları vb. tüm görsel ve metinsel öğeleri tarar. Ardından işlenecek bilgileri iletir (veya toplar) ve sonuçta indekslendi.
Google, Googlebot olarak bilinen Googlebot web tarayıcısını kullanan bir web arama motorudur. İki temel tarayıcı türü vardır.
- Googlebot akıllı telefon – ana tarayıcı
- Googlebot Desktop – ikinci tarayıcı
Googlebot, mobil tarayıcı olarak kullanmayı tercih eden bir web tarayıcısıdır, ancak web sitesinin nasıl çalıştığını ve her iki şekilde nasıl davrandığını görmek için masaüstü tarayıcısını kullanarak her web sitesini tarayabilir.
Tarama bütçesi, yeni eklenen sayfaların taranma sıklığını belirleyebilir.
Tarama bütçesi nedir?
Tarama bütçesi, web tarayıcıları tarafından gerçekleştirilen taramanın para ve sıklığının toplamıdır. Ayrıca taranacak sayfa sayısını ve bu sayfaların Googlebot tarafından yeniden taranma sıklığını belirtir.
Tarayıcı bütçesini belirleyen iki ana faktör vardır:
- Tarama hızı sınırı : Sunucuyu aşırı yüklemeden site tarafından aynı anda taranabilecek sayfa sayısı.
- Tarama talebi : Googlebot tarafından taranması veya yeniden taranması gereken web sayfalarının sayısı.
Tarama bütçeleri, milyonlarca sayfaya sahip büyük web siteleri için birincil endişedir, ancak yalnızca yüzlerce sayfaya sahip web siteleri için değildir. Ayrıca, tarama için büyük bir bütçenin olması, arama motorları için bir kalite işareti olmadığı için bir site için herhangi bir avantaj garanti etmez.
İndekslemeyi nasıl tanımlarsınız?
En iyi SEO şirketindeki uzmanlara göre İndeksleme, veritabanında taranan web sayfalarının (indeks olarak da bilinir) analiz edilmesini ve saklanmasını içeren süreçtir. Yalnızca dizine eklenen sayfalar sıralanır ve uygun anahtar kelimeleri aramak için kullanılır.
Bir web tarayıcısı keşfedilmemiş bir web sitesi keşfettiğinde, Googlebot içeriğini (ör. metin, resimler, videolar, meta etiketler, öznitelikler vb.), bilgilerin daha iyi anlaşılması için analiz edildiği dizin oluşturma aşamasında iletir. bağlam ve ardından dizine koyun.
Martin Splitt, indeksleme aşamasının işlevini açıklıyor. Dır-dir:
“Sayfalara sahip olduğunuzda, üzerlerindeki bilgileri anlayabilmeliyiz. Bu içeriğin amacını ve hangi amaca hizmet etmesi gerektiğini belirlemek önemlidir. Bu, indekslemeyi içeren ikinci adımdır.”
Yukarıdakiler için Google , ilk olarak 2010 yılında tanıtılan Kafein indeksleme sistemini kullanır . Kafein indeksinin veritabanı milyonlarca gigabaytlık sayfayı depolayabilir.
Sayfalar sistematik olarak işlenir ve barındırdıkları içeriğe göre Googlebot tarafından dizine eklenir (ve tekrar taranır). Googlebot, web sitelerini ilk olarak mobil tarayıcılar aracılığıyla ziyaret eden tek kişi değil. Bununla birlikte, Mobil Öncelikli İndeksleme güncellemesini takiben web sitelerinin mobil versiyonlarındaki içeriği indekslemeyi de sever .
Mobil Öncelikli Dizin Oluşturma tam olarak nedir?
Mobil öncelikli dizin oluşturma özelliği, Google'ın içeriği ağırlıklı olarak mobil sürümünde dizine ekleyeceğini ve kullanacağını açıklamasının ardından ilk olarak 2016 yılında başlatıldı.
Google'ın resmi duyurusu şunları açıklıyor:
“Mobil öncelikli indeksleme sürecinde sitenizin mobil versiyonu hakkında bilgi alacağız. Bu nedenle, Googlebot'un orada bulunan tüm içeriği ve tüm kaynakları görebilmesini sağlayın."
Çoğu insan web'de gezinmek için akıllı telefonlar kullandığından, Google'ın web sayfalarını kullanıcılar gibi "benzer şekilde" görüntülemek istemesi mantıklıdır. Bu aynı zamanda web sitesi sahiplerinden web sitelerinin mobil uyumlu ve duyarlı olmasını sağlamaları için açık bir taleptir.
Uyarı: Mobil öncelikli dizine eklemenin her zaman Google'ın her iki sürümün içeriğini kontrol etmek için masaüstü aracılarıyla (Googlebot Desktop) web sitelerini tarayamayacağı anlamına gelmediğini anlamak önemlidir.
Bu bölümde, taramanın teorik bir bakış açısıyla dizine eklenmesi kavramı tartışılmaktadır.
Sitenizin tarama ve/veya indeksleme sürecinde uygulayabileceğiniz pratik adımları inceleyelim.
Google'da nasıl arama yapar ve sitenizi nasıl indekslersiniz?
Web sitenizi tarama veya dizine ekleme işlemi söz konusu olduğunda, arama motorlarının sitenizi taramasına neden olacak bir "doğrudan talimat" vermek mümkün değildir.
Singapur'daki en iyi SEO ajansındaki uzmanlar, sitenizin taranıp taranmadığını veya dizine eklenip eklenmediğini, ne zaman veya nasıl olduğunu kontrol etmek için çeşitli yöntemler paylaşır .
"Google'a varlığınızı anlatmak" açısından hangi seçeneklere sahip olduğunuza bakalım.
1. Hiçbir şey yapmayın ve pasif bir yaklaşım olarak kalın.
Teknolojik açıdan, sitenizin Google tarafından taranması ve dizine eklenmesi için herhangi bir şey yapmanıza gerek yoktur. Tek ihtiyacınız olan, harici siteden bir köprüdür ve Googlebot yakında mevcut tüm web sitelerini taramaya ve dizine eklemeye başlayacaktır.
Ancak, "hiçbir şey yapmama" yöntemi, bir web tarayıcısının web sitenizi bulması biraz zaman alabileceğinden, sitenizin sayfalarını dizine ekleme ve tarama konusunda verimsizliğe neden olabilir.
2. URL İnceleme aracını kullanarak web siteleri gönderin
Web sitelerinizi dizine eklemeyi ve taramayı "güvenli hale getirmenin" bir yolu, Google Arama Konsolu'ndaki URL Denetçi aracını kullanarak sayfalarınızı dizine eklemek (veya dizine eklemek veya yeniden dizine eklemek) için doğrudan Google'dan izin istemektir .
Bu araç, yepyeni bir web siteniz olduğunda veya mevcut sitenizde önemli değişiklikler yaptığınızda ve sitenin mümkün olan en kısa sürede dizine eklenmesini istediğinizde kullanışlıdır.
Prosedür çok kolaydır:
- Google Arama Konsolu'na gidin ve URL'nizi en üstte bulunan arama çubuğuna yapıştırın. Enter'a tıklayın.
- Search Console, sayfanızın durumunu görüntüler. Listede yoksa, indeksleme talebinde bulunabilirsiniz. Zaten dizine eklenmişse, yeniden bir dizin oluşturma isteğinde bulunmanıza gerek yoktur (içerikte daha büyük değişiklikler yaptıysanız).
- URL inceleme aracı, mevcut URL'nin dizine eklenebilir olup olmadığını belirlemenin mümkün olup olmadığını belirleyebilecektir (dakikalar veya saniyeler sürebilir).
- Test başarıyla tamamlandıktan ve test tamamlandıktan sonra, web sitenizin dizine eklenmek üzere öncelikli bir tarama sırasına eklendiğini onaylamak için bir mesaj görüntülenecektir. İndeksleme işlemi birkaç dakika veya birkaç gün içinde herhangi bir yerde olabilir.
3. Çevrimiçi bir harita gönderin
Site haritası, taramak ve arama motorlarına indekslemek istediğiniz sayfaları listeleyen XML formatında bir bilgi dosyasıdır . Site haritalarının birincil avantajı, bir motorun sitenizi taramasını kolaylaştırmasıdır.
Tek seferde çok sayıda URL gönderebilir ve böylece siteniz için genel indeksleme sürecini hızlandırabilirsiniz.
- Google'ı site haritanız hakkında bilgi sahibi olması konusunda bilgilendirmek için, bunu tekrar yapmak üzere Google Arama Konsolu'nu kullanmanız gerekir.
- Google Arama Konsolu > Site Haritaları'na gidin ve bağlantıyı sayfa haritanıza kopyalayın. Yeni bir site haritası oluşturun :
- Gönderiminizi takiben, Googlebot sonunda site haritanızda arama yapabilir ve sağladığınız tüm web sitelerini tarayabilir (taramalarının veya dizine eklenmesinin herhangi bir şekilde engellenmediği varsayılarak).
4. Uygun dahili bağlantınız var mı?
Tarama ve Dizine EklemeSitenizdeki iyi yapılandırılmış bir bağlantı yapısı, web sayfalarınızda gezinmeyi kolaylaştırmak için uzun vadeli iyi bir stratejidir. Ne yapabilirsin?
Cevap, düz bir web sitesi yapısı kullanmaktır . Yani, birbirinden 3'ten az köprü içeren her sayfaya sahip olmak:
İyi tasarlanmış bir bağlantı yapısı, web tarayıcıları hepsine hızlı erişime sahip olacağından, dizine eklenmesini istediğiniz her web sayfasının taranmasını sağlayabilir. Bu, binlerce sayfa ürün içeren büyük web siteleri (örn. E-ticaret) söz konusu olduğunda çok önemlidir.
Google'ın sitenizi taramasını ve dizine eklemesini nasıl durdurabilirsiniz?
Googlebot'un sitenizin belirli alanlarını dizine eklemesini veya taramasını durdurmanın birçok nedeni vardır.
Örnekler:
- Özel içerik: (örneğin, bir aramanın sonuçlarında gösterilmemesi gereken kullanıcı hakkında bilgiler)
- Yinelenen sayfalar: (örneğin, bütçeden tasarruf etmek için taranmaması gereken ve/veya arama sonuçlarında birden fazla kez görünmesi gereken aynı içeriğe sahip sayfalar)
- Boş veya hatalı sayfalar: (örneğin, dizine eklenmeye veya arama sayfalarında görüntülenmeye hazır olmayan devam eden çalışma siteleri)
- Değeri çok az olan veya hiç olmayan sayfalar: (örneğin, aramalar için alakalı içerik sağlamayan kullanıcılar tarafından oluşturulan sayfalar).
Googlebot'un, amacınız bu olmasa bile, yeni web siteleri bulma konusunda son derece verimli olduğu açık olmalıdır. Google'ın beyan ettiği gibi: "Sunucuya işaret eden köprüleri paylaşmayarak bir web sitesi sunucusunun açığa çıkmasını engellemek neredeyse imkansızdır."
Taramayı veya dizine eklemeyi önlemek için mevcut seçeneklere bakalım.
robots.txt dosyasını kullanın (tarayıcıları dışarıda tutmak için)
Robots.txt , web örümceklerine sitenize nasıl göz atacakları konusunda doğrudan talimatlar içeren bir metin dosyasıdır. Web tarayıcıları sitenizi ziyaret ettiğinde, sitenin bir robots.txt dosyası içerip içermediğini ve ardından talimatların neler olduğunu belirler.
Tarayıcılar, bu dosyadaki talimatları okuduktan sonra, yönlendirildikleri şeye göre sitenizi tarama işlemine başlarlar.
robots.txt dosyasında bulunan “izin ver ” ve “izin ver” yönergelerini kullanarak web tarayıcılarına web sitenizin hangi bölümlerinin taranması ve görüntülenmesi ve hangi web sayfalarının başıboş bırakılması gerektiği konusunda bilgi verebilirsiniz.
New York Times'ın birçok izin vermeme komutu içeren site robots.txt dosyasından bir örnek :
- Örneğin, Googlebot'un taranmasını engelleyerek engelleyebilirsiniz.
- Yinelenen içeriğe sahip sayfalar
- özel sayfalar
- Sorgu parametreleri içeren URL'ler
- ince içeriğe sahip sayfalar
- test sayfaları
Bu dosyanın yönergeleri olmadan, web tarayıcısı, taranmasını engellemek istediğiniz URL'ler dahil, bulabildiği her sayfaya göz atacaktır.
Robots.txt, Googlebot'un web sitenizde gezinmesini engellemek için yararlı bir yöntem olsa da, içeriği gizlemek için bu yönteme güvenmemelisiniz.
Google, diğer web siteleri URL'lere bağlantı veriyorsa dizine eklenmesine izin verilmeyen web sitelerini bulabilir. Web sitelerinin bulunmasını durdurmak için, Robots Meta yönergeleri adı verilen daha etkili ikinci bir alternatif var .
“noindex” talimatını kullanmak için kullanın (indekslemeyi durdurmak için)
Robot meta yönergeleri (bazen meta etiketler olarak adlandırılır), bir web sayfasının A bölümüne yerleştirilmiş ve arama motorlarına sayfayı nasıl tarayacaklarını söyleyen küçük HTML kodu parçalarıdır.
Çok yaygın olarak kullanılan bir yönerge "index" yönergesi olarak bilinir (içerik özniteliğinde "index" değerine sahip bir özniteliğe sahip bir robot meta yönergesi). Arama motorlarının web sitenizi dizine eklemesini ve sitenizin sayfasını SERP'lerde göstermesini engeller. Bunun gibi:
- "Robotlar" özelliği "robotlar" özelliği, komutun tüm web tarayıcıları için geçerli olduğunu belirtir.
- Bu "indeks yok" yönergesi, sayfalarınızın insanlar tarafından ziyaret edilmesini istediğinizde, ancak dizine eklenebilir olmak veya bir aramanın sonuçlarında görünmek istemiyorsanız özellikle yararlıdır.
- İndeks özniteliği, genellikle, arama motorlarına sayfadaki köprüleri tarayıp tarayamayacaklarını bildirmek için aşağıdaki ve takip etmeyi bırakan özniteliklerle birleştirilir.
Sayfanın dizine eklenip eklenmediğini belirlemek için ne yapabilirsiniz?
Sayfaların taranıp dizine eklenip eklenmediğini veya web sitesinde belirli sorunlar olup olmadığını belirlerken birkaç seçenek vardır.
1. Elle doğrulayın
Web sitenizin dizine eklenebilir olup olmadığını belirlemenin en etkili yolu, aşağıdaki yöntemi kullanarak manuel olarak kontrol etmektir: web sitesi: operatörü:
Siteniz taranıp dizine eklendiyse, dizine eklenen tüm sayfaları ve dizine eklenen yaklaşık sayfa sayısını "XY Sonuçları Hakkında" bölümünde görürsünüz.
Tek bir URL'nin dizine eklenip eklenmediğini doğrulamak istiyorsanız, ad yerine bu URL'yi kullanabilirsiniz. Web siteniz dizine eklendiyse, arama sonuçlarında listelendiğini görebilmeniz gerekir.
2. Kapsamın Endeks Durumunu Kontrol Edin
Dizin (veya dizine eklenmemiş sayfalar) sayfalarınızın daha kapsamlı bir analizi için, Google'ın Arama Konsolu içindeki bu Dizin kapsamı raporunu kullanın .
Dizin Kapsam Raporundaki ayrıntıları içeren grafikler, URL'lerin durumu ve taranan veya dizine eklenen sayfaları etkileyen sorun türleri hakkında önemli bilgiler sağlayabilir.
3. Bu URL İnceleme aracını kullanın.
Bu URL Denetleme aracı, web sitenizdeki belirli web sayfalarının en son tarandıkları andan itibaren ayrıntıları sağlayabilir.
Web sitenizin olup olmadığını kontrol edin:
- Bazı sorunları var (bulunma şekliyle ilgili belirli ayrıntılarla birlikte)
- taranmıştı. Sonra, son kez emekleme ortadaydı.
- Sayfanın dizine eklenip eklenmediği ve arama sonuçlarında görünüp görünmediği
Web sitenizin taranması, google tarafından dizine eklenmesi ve sıralanması gibi tüm sorunlardan kurtulmak istiyorsanız, Mumbai'deki arama motoru optimizasyonu paketlerimize göz atın ,
Çözüm
Taranabilirliğinizi ve dizine eklenebilirliğinizi geliştirmek, sitenizin genel SEO'sunu iyileştirmenin mükemmel bir yoludur. Bu makaleyi beğendiyseniz ve daha fazlasını okumak istiyorsanız, adresindeki blogumuza göz atın.
İçerik Pazarlaması: 2022'de İçerik Pazarlamasının Yararları ve En İyi Stratejileri .