Sitenizin Taranabilirliğini ve Dizine Eklenebilirliğini Artırmak için 10 Adım
Yayınlanan: 2022-11-04Anahtar kelimeler ve içerik, çoğu arama motoru optimizasyonu stratejisinin üzerine inşa edildiği ikiz sütun olabilir, ancak bunlar önemli olanlardan çok uzaktır.
Daha az tartışılan ancak aynı derecede önemli olan - yalnızca kullanıcılar için değil, arama botları için - web sitenizin keşfedilebilirliğidir.
İnternette 1,93 milyar web sitesinde yaklaşık 50 milyar web sayfası var. Bu, herhangi bir insan ekibinin keşfetmesi için çok fazla, bu nedenle örümcek olarak da adlandırılan bu botlar önemli bir rol oynuyor.
Bu botlar, web sitesinden web sitesine ve sayfadan sayfaya bağlantıları izleyerek her sayfanın içeriğini belirler. Bu bilgiler, daha sonra sıralama için arama motorunun algoritmasından geçirilen URL'lerin geniş bir veritabanında veya dizininde derlenir.
Bu iki adımlı gezinme ve sitenizi anlama süreci, tarama ve dizine ekleme olarak adlandırılır.
Bir SEO uzmanı olarak, şüphesiz bu terimleri daha önce duymuşsunuzdur, ancak bunları sadece netlik adına tanımlayalım:
- Taranabilirlik , bu arama motoru botlarının web sayfalarınızı ne kadar iyi tarayabildiğini ve dizine ekleyebildiğini ifade eder.
- Dizinlenebilirlik , arama motorunun web sayfalarınızı analiz etme ve bunları dizinine ekleme yeteneğini ölçer.
Tahmin edebileceğiniz gibi, bunların ikisi de SEO'nun temel parçalarıdır.
Sitenizin taranabilirliği zayıfsa, örneğin birçok bozuk bağlantı ve çıkmaz sokak varsa, arama motoru tarayıcıları tüm içeriğinize erişemez ve bu da onu dizinden hariç tutar.
Dizine eklenebilirlik ise hayati önem taşır çünkü dizine eklenmemiş sayfalar arama sonuçlarında görünmez. Google, veritabanına dahil etmediği bir sayfayı nasıl sıralayabilir?
Tarama ve dizin oluşturma işlemi burada tartıştığımızdan biraz daha karmaşıktır, ancak temel genel bakış budur.
Nasıl çalıştıkları hakkında daha derinlemesine bir tartışma arıyorsanız, Dave Davies'in tarama ve indeksleme üzerine mükemmel bir makalesi var.
Tarama ve Dizine Ekleme Nasıl İyileştirilir
Artık bu iki sürecin ne kadar önemli olduğunu ele aldığımıza göre, web sitenizin tarama ve dizine eklemeyi etkileyen bazı öğelerine bakalım ve sitenizi bunlar için optimize etmenin yollarını tartışalım.
1. Sayfa Yükleme Hızını Artırın
Kataloglanacak milyarlarca web sayfasıyla, web örümceklerinin bağlantılarınızın yüklenmesini beklemek için bütün günü yoktur. Buna bazen tarama bütçesi denir.
Siteniz belirtilen zaman aralığında yüklenmezse sitenizden ayrılırlar, bu da taranmamış ve dizine eklenmemiş kalacağınız anlamına gelir. Ve tahmin edebileceğiniz gibi, bu SEO amaçları için iyi değil.
Bu nedenle, sayfa hızınızı düzenli olarak değerlendirmek ve mümkün olan her yerde iyileştirmek iyi bir fikirdir.
Web sitenizin hızını kontrol etmek için Google Arama Konsolunu veya Screaming Frog gibi araçları kullanabilirsiniz.
Siteniz yavaş çalışıyorsa, sorunu hafifletmek için adımlar atın. Bu, sunucunuzu veya barındırma platformunuzu yükseltmeyi, sıkıştırmayı etkinleştirmeyi, CSS, JavaScript ve HTML'yi küçültmeyi ve yeniden yönlendirmeleri ortadan kaldırmayı veya azaltmayı içerebilir.
Önemli Web Verileri raporunuzu kontrol ederek yükleme sürenizi neyin yavaşlattığını öğrenin. Özellikle kullanıcı merkezli bir bakış açısıyla, hedefleriniz hakkında daha ayrıntılı bilgi istiyorsanız, Google Lighthouse çok yararlı bulabileceğiniz açık kaynaklı bir araçtır.
2. Dahili Bağlantı Yapısını Güçlendirin
İyi bir site yapısı ve dahili bağlantı, başarılı bir SEO stratejisinin temel unsurlarıdır. Düzensiz bir web sitesinin arama motorları tarafından taranması zordur, bu da dahili bağlantı oluşturmayı bir web sitesinin yapabileceği en önemli şeylerden biri haline getirir.
Ama sadece bizim sözümüze güvenmeyin. Google'ın arama savunucusu John Mueller bu konuda şunları söyledi:
“İç bağlantı, SEO için çok önemlidir. Google'a bir nevi rehberlik etmek ve ziyaretçileri önemli olduğunu düşündüğünüz sayfalara yönlendirmek bir web sitesinde yapabileceğiniz en büyük şeylerden biri bence."
Dahili bağlantınız zayıfsa, öksüz sayfalar veya web sitenizin başka herhangi bir bölümüne bağlantı vermeyen sayfaları da riske atmış olursunuz. Bu sayfalara hiçbir şey yönlendirilmediğinden, arama motorlarının bunları bulmasının tek yolu site haritanızdır.
Bu ve kötü yapıdan kaynaklanan diğer sorunları ortadan kaldırmak için siteniz için mantıklı bir iç yapı oluşturun.
Ana sayfanız, piramidin aşağısındaki sayfalar tarafından desteklenen alt sayfalara bağlanmalıdır. Bu alt sayfaların daha sonra doğal hissettirdiği bağlamsal bağlantılara sahip olması gerekir.
Dikkat edilmesi gereken başka bir şey de, URL'de yazım hataları olanlar da dahil olmak üzere bozuk bağlantılardır. Bu, elbette, korkunç 404 hatasına yol açacak olan kopuk bir bağlantıya yol açar. Başka bir deyişle, sayfa bulunamadı.
Bununla ilgili sorun, bozuk bağlantıların yardımcı olmaması ve taranabilirliğinize zarar vermesidir.
Özellikle yakın zamanda bir site taşıma, toplu silme veya yapı değişikliği yaşadıysanız, URL'lerinizi iki kez kontrol edin. Eski veya silinmiş URL'lere bağlantı vermediğinizden emin olun.
Dahili bağlantı için diğer en iyi uygulamalar arasında, iyi miktarda bağlanabilir içeriğe sahip olmak (içerik her zaman kraldır), bağlantılı resimler yerine bağlantı metni kullanmak ve bir sayfada “makul sayıda” bağlantı kullanmak (bu ne anlama geliyorsa) yer alır.
Oh evet, ve dahili bağlantılar için takip bağlantılarını kullandığınızdan emin olun.
3. Site Haritanızı Google'a Gönderin
Yeterli zaman verildiğinde ve yapmamasını söylemediğinizi varsayarsak, Google sitenizi tarar. Bu harika, ancak siz beklerken arama sıralamanıza yardımcı olmuyor.
Yakın zamanda içeriğinizde değişiklik yaptıysanız ve Google'ın bunu hemen öğrenmesini istiyorsanız, Google Search Console'a bir site haritası göndermek iyi bir fikirdir.
Site haritası, kök dizininizde bulunan başka bir dosyadır. Sitenizdeki her sayfaya doğrudan bağlantıları olan arama motorları için bir yol haritası görevi görür.
Bu, Google'ın aynı anda birden çok sayfa hakkında bilgi edinmesine olanak tanıdığından, dizine eklenebilirlik açısından faydalıdır. Bir tarayıcı, derin bir sayfayı keşfetmek için beş dahili bağlantıyı takip etmek zorundayken, bir XML site haritası göndererek, site haritası dosyanıza tek bir ziyaretle tüm sayfalarınızı bulabilir.
Site haritanızı Google'a göndermek, derin bir web siteniz varsa, sık sık yeni sayfalar veya içerik ekliyorsanız veya sitenizin dahili bağlantıları iyi değilse özellikle yararlıdır.
4. Robots.txt Dosyalarını Güncelleyin
Muhtemelen web siteniz için bir robots.txt dosyasına sahip olmak istiyorsunuz. Zorunlu olmamakla birlikte, web sitelerinin %99'u bunu genel bir kural olarak kullanır. Buna aşina değilseniz, web sitenizin kök dizininde düz bir metin dosyasıdır.
Arama motoru tarayıcılarına sitenizi nasıl taramalarını istediğinizi söyler. Birincil kullanımı, bot trafiğini yönetmek ve sitenizin isteklerle aşırı yüklenmesini önlemektir.
Bunun taranabilirlik açısından kullanışlı olduğu yer, Google'ın hangi sayfaları taradığını ve dizine eklediğini sınırlamaktır. Örneğin, muhtemelen Google'ın dizininde dizinler, alışveriş sepetleri ve etiketler gibi sayfalar istemiyorsunuzdur.
Elbette bu faydalı metin dosyası, taranabilirliğinizi de olumsuz etkileyebilir. Sayfalarınıza tarayıcı erişimini istemeden engelleyip engellemediğinizi görmek için robots.txt dosyanıza bakmanız (veya yeteneklerinize güvenmiyorsanız bir uzmana yaptırmanız) iyi olur.
robots.text dosyalarındaki bazı yaygın hatalar şunlardır:
- Robots.txt kök dizinde değil.
- Joker karakterlerin kötü kullanımı.
- robots.txt dosyasında Noindex.
- Engellenen komut dosyaları, stil sayfaları ve resimler.
- Site haritası URL'si yok.
Bu sorunların her birinin derinlemesine incelenmesi ve bunları çözmeye yönelik ipuçları için bu makaleyi okuyun.
5. Kanonikleştirmenizi Kontrol Edin
Kurallı etiketler, birden çok URL'den gelen sinyalleri tek bir kurallı URL'de birleştirir. Bu, Google'a yinelenenleri ve güncel olmayan sürümleri atlarken istediğiniz sayfaları dizine eklemesini söylemenin yararlı bir yolu olabilir.

Ancak bu, haydut kanonik etiketler için kapıyı açar. Bunlar, artık mevcut olmayan bir sayfanın eski sürümlerine atıfta bulunur ve arama motorlarının yanlış sayfaları dizine eklemesine ve tercih ettiğiniz sayfaları görünmez bırakmasına neden olur.
Bu sorunu ortadan kaldırmak için, hileli etiketleri taramak ve bunları kaldırmak için bir URL inceleme aracı kullanın.
Web siteniz uluslararası trafiğe yönelikse, yani farklı ülkelerdeki kullanıcıları farklı kurallı sayfalara yönlendiriyorsanız, her dil için kurallı etiketlere sahip olmanız gerekir. Bu, sayfalarınızın sitenizin kullandığı her dilde dizine eklenmesini sağlar.
6. Bir Saha Denetimi Gerçekleştirin
Tüm bu diğer adımları gerçekleştirdiğinize göre, sitenizin tarama ve dizine ekleme için optimize edildiğinden emin olmak için yapmanız gereken son bir şey daha var: site denetimi. Ve bu, Google'ın siteniz için dizine eklediği sayfaların yüzdesini kontrol etmekle başlar.
Endekslenebilirlik Oranınızı Kontrol Edin
Dizine eklenebilirlik oranınız, Google'ın dizinindeki sayfa sayısının web sitemizdeki sayfa sayısına bölümüdür.
Google Search Console Index'den google index'te kaç sayfa olduğunu “Sayfalar” sekmesine gidip CMS admin panelinden web sitesindeki sayfa sayısını kontrol ederek öğrenebilirsiniz.
Sitenizin dizine eklenmesini istemediğiniz bazı sayfalara sahip olma olasılığı yüksektir, bu nedenle bu sayı büyük olasılıkla %100 olmayacaktır. Ancak endekslenebilirlik oranı %90'ın altındaysa, araştırılması gereken sorunlarınız var demektir.
Dizine eklenmemiş URL'lerinizi Search Console'dan alabilir ve onlar için bir denetim çalıştırabilirsiniz. Bu, soruna neyin neden olduğunu anlamanıza yardımcı olabilir.
Google Search Console'da bulunan bir başka kullanışlı site denetleme aracı da URL Denetleme Aracıdır. Bu, Google örümceklerinin ne gördüğünü görmenize olanak tanır ve ardından Google'ın neyi oluşturamadığını anlamak için gerçek web sayfalarıyla karşılaştırabilirsiniz.
Yeni Yayınlanan Sayfaları Denetle
Web sitenizde her yeni sayfa yayınladığınızda veya en önemli sayfalarınızı güncellediğinizde, bunların dizine eklendiklerinden emin olmalısınız. Google Arama Konsolu'na gidin ve hepsinin göründüğünden emin olun.
Hâlâ sorun yaşıyorsanız, bir denetim ayrıca SEO stratejinizin diğer hangi bölümlerinin yetersiz kaldığı konusunda size fikir verebilir, bu nedenle çifte kazançtır. Denetim sürecinizi aşağıdakiler gibi ücretsiz araçlarla ölçeklendirin:
- çığlık atan kurbağa
- Semrush
- Ziptie
- tarama
- Lumar
7. Düşük Kaliteli veya Yinelenen İçeriği Kontrol Edin
Google, içeriğinizi arama yapanlar için değerli bulmazsa, dizine eklenmeye değer olmadığına karar verebilir. Bu ince içerik, bilindiği gibi, kötü yazılmış içerik (örneğin, dilbilgisi hataları ve yazım hatalarıyla dolu), sitenize özgü olmayan standart içerik veya değeri ve yetkisi hakkında harici sinyaller içermeyen içerik olabilir.
Bunu bulmak için sitenizdeki hangi sayfaların dizine eklenmediğini belirleyin ve ardından onlar için hedef sorguları inceleyin. Arama yapanların sorularına yüksek kaliteli cevaplar veriyorlar mı? Değilse, değiştirin veya yenileyin.
Yinelenen içerik, sitenizi tararken botların kapanmasının başka bir nedenidir. Temel olarak, olan şey şu ki, kodlama yapınız onu karıştırdı ve hangi sürümün indeksleneceğini bilmiyor. Bu, oturum kimlikleri, gereksiz içerik öğeleri ve sayfalandırma sorunları gibi şeylerden kaynaklanabilir.
Bazen bu, Google Arama Konsolunda bir uyarıyı tetikleyerek size Google'ın düşündüğünden daha fazla URL ile karşılaştığını bildirir. Bir tane almadıysanız, yinelenen veya eksik etiketler ya da botlar için fazladan iş yaratabilecek fazladan karakter içeren URL'ler gibi şeyler için tarama sonuçlarınızı kontrol edin.
Etiketleri düzelterek, sayfaları kaldırarak veya Google'ın erişimini ayarlayarak bu sorunları düzeltin.
8. Yönlendirme Zincirlerini ve Dahili Yönlendirmeleri Ortadan Kaldırın
Web siteleri geliştikçe, yönlendirmeler doğal bir yan üründür ve ziyaretçileri bir sayfadan daha yeni veya daha alakalı bir sayfaya yönlendirir. Ancak çoğu sitede yaygın olsalar da, onları yanlış yönetiyorsanız, yanlışlıkla kendi indekslemenizi sabote ediyor olabilirsiniz.
Yönlendirmeler oluştururken yapabileceğiniz birkaç hata vardır, ancak en yaygın olanlardan biri yönlendirme zincirleridir. Bunlar, tıklanan bağlantı ile hedef arasında birden fazla yönlendirme olduğunda meydana gelir. Google bunu olumlu bir sinyal olarak görmüyor.
Daha aşırı durumlarda, bir sayfanın başka bir sayfaya yönlendirdiği, başka bir sayfaya yönlendirdiği vb., sonunda ilk sayfaya geri bağlanana kadar bir yeniden yönlendirme döngüsü başlatabilirsiniz. Başka bir deyişle, hiçbir yere gitmeyen hiç bitmeyen bir döngü yarattınız.
Screaming Frog, Redirect-Checker.org veya benzeri bir araç kullanarak sitenizin yönlendirmelerini kontrol edin.
9. Bozuk Bağlantıları Düzeltin
Benzer şekilde, bozuk bağlantılar sitenizin taranabilirliğine zarar verebilir. Kırık bağlantılara sahip olmadığınızdan emin olmak için sitenizi düzenli olarak kontrol etmelisiniz, çünkü bu yalnızca SEO sonuçlarınıza zarar vermekle kalmayacak, aynı zamanda insan kullanıcıları da sinirlendirecektir.
Sitenizdeki her bir bağlantıyı (üstbilgi, altbilgi, gezinme, metin içi vb.) manuel olarak değerlendirmek de dahil olmak üzere sitenizdeki bozuk bağlantıları bulmanın birkaç yolu vardır veya Google Search Console, Analytics veya 404 hata bulmak için Screaming Frog.
Bozuk bağlantıları bulduğunuzda, bunları düzeltmek için üç seçeneğiniz vardır: onları yeniden yönlendirmek (uyarılar için yukarıdaki bölüme bakın), güncellemek veya kaldırmak.
10. İndeksŞimdi
IndexNow, URL'lerin bir API aracılığıyla arama motorları arasında aynı anda gönderilmesine izin veren nispeten yeni bir protokoldür. Arama motorlarını yeni URL'ler ve web sitenizdeki değişiklikler hakkında uyararak bir XML site haritası göndermenin süper yüklü bir versiyonu gibi çalışır.
Temel olarak yaptığı şey, tarayıcılara sitenize önceden bir yol haritası sunmaktır. Sitenize ihtiyaç duydukları bilgilerle girerler, bu nedenle site haritasını sürekli olarak yeniden kontrol etmeye gerek yoktur. Ve XML site haritalarından farklı olarak, arama motorlarını 200 olmayan durum kodu sayfaları hakkında bilgilendirmenize olanak tanır.
Uygulaması kolaydır ve yalnızca bir API anahtarı oluşturmanızı, onu dizininizde veya başka bir yerde barındırmanızı ve URL'lerinizi önerilen biçimde göndermenizi gerektirir.
Toplama
Şimdiye kadar, web sitenizin dizine eklenebilirliği ve taranabilirliği hakkında iyi bir anlayışa sahip olmalısınız. Bu iki faktörün arama sıralamanız için ne kadar önemli olduğunu da anlamalısınız.
Google'ın örümcekleri sitenizi tarayabilir ve dizine ekleyebilirse, kaç anahtar kelime, geri bağlantı ve etiket kullanırsanız kullanın, arama sonuçlarında görünmezsiniz.
Bu nedenle, sitenizi yoldan çıkaran, yanıltıcı veya yanlış yönlendiren bot olabilecek herhangi bir şeye karşı düzenli olarak kontrol etmeniz çok önemlidir.
Bu nedenle, kendinize iyi bir araç seti edinin ve başlayın. Özenli ve ayrıntılara dikkat edin; yakında Google örümceklerinin sitenizi örümcekler gibi kaplayacağını göreceksiniz.
Daha fazla kaynak:
- Arama Endeksini Geliştirmek İçin 11 SEO İpuçları ve Püf Noktaları
- Arama Motorları Nasıl Tarar ve Dizine Eklenir: Bilmeniz Gereken Her Şey
- SEO Denetimi Nasıl Yapılır: Nihai Kontrol Listesi
Öne Çıkan Görsel: Roman Samborskyi/Shutterstock
