Daha iyi optimize edilmiş bir tarama bütçesiyle daha üst sıralarda yer almaya nasıl başlanır?

Sıralamayı etkileyen birden çok faktör vardır - harici bağlantılar, anahtar kelime kullanımı, site hızı ve daha pek çok şey. Ancak sitenizi optimize etmeye başladığınızda, hatırlamanız gereken şey, sitenizin karşılığını alabilmek için tüm optimizasyon çabalarınızın taranması ve dizine eklenmesi gerektiğidir.

Web sitenizin taranma şekli, tarama bütçenize, yani Googlebot'un belirli bir süre boyunca sitenizi kaç kez ziyaret ettiğine göre belirlenir. Ve sitenizin görünürlüğü, tarama bütçesinin ne kadar iyi dengelendiğine bağlıdır.

Tarama bütçesi sitenizin Google'daki görünürlüğünü neden etkiler?

Tarama bütçesi sınırlıdır. Bu birkaç zorluk yaratır:

• Tarama bütçesi optimize edilmediğinde, site sayfalarının tümü Googlebot tarafından ziyaret edilmez. Sonuç olarak, dizine eklenmezler ve arama sonuçlarında üst sıralarda yer almazlar.
• Güncellenen sayfalar, diğer web sitesinin sayfalarının taranma sıklığı nedeniyle uzun süre Googlebot'tan ilgi görmeyebilir. Bu, SEO zaman çizelgenizi olumsuz etkiler: Google, optimizasyon çabalarınızı bilmediği sürece, SERP görünürlüğünüz artmaz.

Bu nedenle, tüm önemli sayfaların düzenli olarak ziyaret edildiğinden emin olmak için tarama bütçesinin optimize edilmesi gerekir. İşte bunu nasıl yapabileceğiniz.

Mevcut tarama bütçenizi nasıl belirleyebilirsiniz?

Tarama bütçenizin optimize edilmesi gerekip gerekmediğini anlamak için önce bütçenizin yetersiz olup olmadığını kontrol edin. Google'dan Gary Illyes'e göre, yalnızca büyük sitelerin gerçekten neyin taranacağına öncelik vermesi gerekiyor, özellikle de parametrelere dayalı olarak çok sayıda URL'yi otomatik olarak oluşturanlar. Sitenizin ek tarama bütçesi dengelemesi gerektirdiğini düşünüyorsanız, işte nasıl başlayacağınız.

Google Search Console'da mevcut sitenizin tarama istatistiklerini bulabilir ve tarama bütçenizin ayrıntılarını öğrenebilirsiniz.

Yaklaşık tarama bütçesi şu şekilde hesaplanabilir:

Günde taranan ortalama sayfa sayısı x bir aydaki gün sayısı =
Yaklaşık tarama bütçesi

Örneğin, aşağıdaki bir rapordan, Google'ın bu web sitesinde günde 371 sayfa taradığını görebilirsiniz.

Google Arama Konsolunda Tarama İstatistikleri grafiği

Bu nedenle, bu web sitesinin yaklaşık bir tarama bütçesi:

371 x 30 = 11130

Ancak, Google tarayıcılarının web sitenize tam olarak ne sıklıkta ulaştığını bilmek için sunucu günlüklerini kontrol etmeniz gerekir. Google Arama Konsolu, 12 bot için toplu tarama bütçesini gösterir ve tam tarama bütçesi dağılımını görmek için bir günlük analiz aracına ihtiyacınız olacaktır.

Tarama grafiğindeki iniş ve çıkışlar bir sorunun işareti olabilir, ancak durum her zaman böyle değildir. Örneğin, yukarıdaki grafikte ani bir artış, yeniden gönderilen bir site haritasını temsil eder ve bu, bir Googlebot'un web sitesini tekrar ziyaret etmesini tetikler.

Tarama bütçenizi nasıl optimize edebilirsiniz?

Tarama bütçenizi optimize etmek için basit bir kurala bağlı kalmanız gerekir:

Taranması gerekenlerin tarandığından ve taranması gerekmeyenlerin taranmadığından emin olun.

Bu, önemli sayfaların yeterince dikkat çektiği ve sitenize herhangi bir değer getirmeyenlerin dışarıda bırakıldığı anlamına gelir. İşte sizi oraya götürecek kesin adımlar.

1.Tüm önemli sayfalarınızın Googlebot tarafından erişilebilir olduğundan emin olun (ör. robots.txt dosyasında engellenmemiş)

Şaşırtıcı bir şekilde, önemli sayfaların robots.txt dosyasında reddedilme durumunun olması çok yaygındır. Bu şekilde Googlebot tarafından yok sayılırlar ve böylece indekslemeden gizlenirler. Göreviniz, taranmasını istediğiniz sayfaların bu duruma sahip olmadığından ve tarayıcılar tarafından erişilebilir olduğundan emin olmaktır.

robots.txt dosyasını Google Arama Konsolunda bulabilirsiniz. Önemli sayfalarınızın reddedilmediğinden emin olmak için dosyaya göz atın.

2. Googlebot'un ziyaret sıklığını etkilediği için sitenizin genel durumunu kontrol edin (tarama hızı sınırı olarak da bilinir)

Google'ın kendisinin dediği gibi, tarama hızı sınırı, belirli bir site için maksimum getirme hızıdır. Basitçe söylemek gerekirse, bir Googlebot'un siteyi taramak için kaç paralel bağlantı oluşturabileceğini ve getirmeler arasında ne kadar beklemesi gerektiğini belirtir. Site hızı yüksek olduğunda ve limit yükselir ve Googlebot daha fazla eşzamanlı bağlantı oluşturur. Site yanıt oranı düşük olduğunda veya sunucu hataları döndürdüğünde, sınır düşer ve Googlebot daha az tarama yapar.

Böylece sitenizin taranma şekli de sitenin sağlığından etkilenir. Buna site hızı, mobil uyumluluk, 404 hata miktarı vb. dahildir.

Sitenin sağlığı bu araçlarla kontrol edilebilir.

• OnCrawl, yinelenen ve neredeyse yinelenen içeriğe sahip sayfaları, 404 ve yetim sayfaları (ona işaret eden dahili bağlantıları olmayan) vb. bulmanızı sağlar.

OnCrawl'da yinelenen içerik widget'ları

OnCrawl'da yetim sayfa widget'ları

• Google'ın Mobil Uyumluluk Testi, bir web sitesinin mobil uyumluluğunu kontrol eder
• Sitenin hızı, PageSpeed ​​Insights veya GTmetrix ücretsiz araçları yardımıyla kontrol edilebilir.

Ardından, OnCrawl gibi bir günlük dosyaları analiz aracı kullanarak tarama sıklığınızı izleyebilir ve Googlebot'un sayfalarınıza daha sık gelip gelmediğini görebilirsiniz.

3. Kullanıcılara herhangi bir değer getirmeyen sayfaları hariç tutun

Bunlar, içeriği zayıf veya hiç olmayan sayfalar, teknik sayfalar vb. Dizine eklendiğinden ve az gösterim aldığından Google Search Console'da bulunabilirler. Bunları tespit etmek için başka bir yer de OnCrawl'ın SEO Etkisi raporudur. Örneğin, kelime sayısının tarama sıklığı üzerindeki etkisini gösterir.

Örneğin, büyük e-ticaret web siteleri için ortak bir sorun yönlü gezinmedir. Ryan Stewart, tarama bütçesi optimizasyonu hakkındaki videosunda bundan bahsediyor (bunu kontrol etmek için 7:20'ye atlayabilirsiniz, ancak videonun tamamı da son derece kullanışlıdır). Kullanıcı bir web sitesinde bir kategori seçtiğinde, parametresi sayfa URL'sine eklenir. Googlebot'a göre, o andan itibaren farklı bir URL'dir ve ayrı bir ziyaret gerektirir. Olası kategori kombinasyonlarının sayısı çok fazla olduğundan ve tarama bütçesini önemli ölçüde aşırı yükleyebileceğinden, bu tür sayfaların filtrelenmesi gerekir.

Benzer bir sorun, URL'lerin içine bir oturum tanımlayıcısı yerleştirildiğinde ortaya çıkar. Bu tür sayfalar da filtrelenmelidir.

4. En önemlilerinin daha sık taranması için sayfalarınıza öncelik verin

Sayfa, büyük trafik potansiyeline sahipse önemlidir.

Her şeyden önce, bunlar zaten çok fazla trafiğe sahip olan sayfalardır; bunları Google Analytics'te görebilirsiniz. Davranış raporu altında, Site İçeriği → Tüm Sayfalar'a gidin ve sayfaları sayfa görüntüleme sayısına göre sıralayın.

İkincisi, konumları iyileşen sayfalardır, bu da onların popülaritesinin arttığı anlamına gelir. Bu tür sayfalar Google Arama Konsolunda bulunabilir, ancak filtreleme seçenekleri sınırlı olduğundan, onları fark etmeniz biraz zaman alabilir.

Bir alternatif, ne tür sayfaların artan bir görünürlük eğilimine sahip olduğunu görmenize izin verdiği için AccuRanker kullanmak olabilir. Kullanmaya başlamak için, Google Arama Konsolundan anahtar kelime listesini tek bir tıklamayla içe aktarabilir ve ardından en umut verici sayfaların hangileri olduğunu tespit edebilirsiniz.

Ek olarak, sonraki haftalarda ve aylarda ek SEO trafiğine sahip olabilecek sayfaları tespit etmenin bir yolu vardır. Google Arama Konsolu API'si ve Google Data Studio ile biraz oynamayı içerir, ancak sonuç biraz şaşırtıcıdır. Boyut ve Gösterim olarak Açılış Sayfalarını, URL Tıklamalarını ve URL TO'sunu metrik olarak kullanarak, popülaritesi artan sayfaları diğerlerinden daha hızlı bulabilirsiniz.

Hangi sayfaların önceliklendirilmesi gerektiğini öğrendiğinizde, daha sık taranmalarını sağlamak için şunları yapabilirsiniz:

• En önemli sayfaları ana sayfaya yaklaştırın, hatta onlara giden bağlantıyı orada gösterin. Örneğin, Gezinme veya "Özel teklifler" bölümlerine bir sayfa bağlantısı ekleyebilirsiniz.
• Ürün içermeyen tüm sayfa kategorilerine (stokta olmayan/mevsimsel ürünler) 301 yönlendirmeleri koyun. Söz konusu ürün tekrar stoğa girdiğinde bu yönlendirmeyi kapatmayı unutmayın.

5. Sayfaya yeterli dahili bağlantı sağlayın

Dahili bağlantılar, Googlebot'un ana yolu olarak tarama için çok önemlidir. Bir sayfada dahili bir bağlantı olmadan, basitçe ilerleyemez. Bu nedenle, bir sayfaya yönlendiren bağlantılar ekleyerek, sayfanın daha erken dizine alınma şansını artırırsınız.

Örneğin, eski bir sayfanın daha sık taranmasını istiyorsanız, yeni sayfalarınıza ona yönlendiren bir bağlantı ekleyin. Googlebot yeni sayfayı ziyaret ettiğinde, eski sayfayı da yeniden dizine ekler.

Sayfa bağlantısını web sitesinin gezinme menüsüne ekleyerek, kullanıcıların ve Googlebot'un siteye kolayca erişmesini sağlayabilirsiniz. SEMrush, yeni blog gönderilerinin taranmasını hızlandırmak için bu tekniği kullanır. Tüm yeni makaleler ana sayfalarındaki Son Gönderiler bölümünde görünür ve bu nedenle Googlebot tarafından önceliklendirilir.

Bu teknik, e-ticaret sitelerinde yeni ürün sayfalarının indekslenmesini hızlandırmak için de kullanılabilir.

toparlamak

Yukarıda da belirtildiği gibi tarama bütçesi optimizasyonu, e-ticaret siteleri gibi dallanmış bir yapıya sahip daha büyük siteler için daha önemlidir. Ancak uygun sayfa tarama, SEO'nun temeli olduğundan ve SERP görünürlüğünü doğrudan etkilediğinden, SEO çabalarınızın sonuçlarını hızlandırmak için tarama istatistiklerinizi gözden geçirmek ve tarama bütçesini dengelemek isteyebilirsiniz.

Tarama bütçesi optimizasyonu için temel araç seti şunları içerir:

• Mevcut tarama bütçesi tahmininizi görmek için Google Arama Konsolu
• Yinelenen içerik, 404 sayfa, yetim sayfalar vb. bulmak için OnCrawl gibi site sağlığı denetçileri.
• Google'ın Mobil Uyumluluk Testi gibi sitenizin mobil uyumluluğunu kontrol etmeye yönelik araçlar
• PageSpeed ​​Insights veya GTmetrix gibi site hızı denetleyicisi
• Popülerlik potansiyeli yüksek sayfaları bulmak için araçlar - zaten çok fazla trafiğe sahip olanlar (bunları Google Analytics'te görebilirsiniz) veya artan görünürlük eğilimi olanlar (AccuRanker'ın yardımıyla bulunabilir).