Robots.txt ve Sitemap.xml Kullanımı

Her websitesinde bulunması gereken bazı araçlar vardır.Google ve diğer arama motorları bu araçlar sayesinde websitesini site sahibinin belirttiği kurallara göre daha çabuk tarar , siteyi daha iyi algılarlar. Fakat websitenizde bu uygulamaları bulundurmanız yetmemekle birlikle bu uygulamaları düzgün kullanırsanız bu uygulamalardan aldığınız verim de doğru orantıda artacaktır.

robots.txtRobots.txt Kullanımı

Robots.txt Google ,Yandex ,Bing gibi arama motorlarının websiteniz üzerindeki erişimini kısıtlayan dosyaladır.Arama motorları websitenizi ziyaret ettiğinde ilk olarak robots.txt dosyanızı kontrol ederler.Çünkü robots.txt dosyanız arama motorları için bir yol göstericidir.Arama motorları robots.txt dosyanıza bakarak yol izlerler.Örneğin robots.txt dosyanız aşşağıdaki gibi olsun.

User-agent: *
Disallow: /admin/
Disallow: /arsiv/
Sitemap: http://siteniz.com/sitemap.xml.gz

Örümcek diye tabir ettiğimiz arama motoru botları otomatik olarak websitesinzde bulunan /admin ve /arsiv klasörlerini taramayacaklardır.Örümcekler bu klasörleri taramadıkları için bu klasörler otomatik olarak arama motoru sorgularına da dahil olmayacaktır.Ayrıca “sitemap” ibaresi site haritanızın hangi dizinde olduğunu belirtmektedir.Google botları robots.txt dosyasındaki sitemap ibaresi ile site haritanızı daha kolay bir biçimde bulup sitenizi daha hızlı indexleyecektir.

Sitemap (Site Haritası) Kullanımısitemap

Sitemap yani Türkçe adıyla site haritası bir websitesinin olmazsa olmazlarındandır.Bir sitedeki tüm web sayfalarının listelendiği dosyadır. Genel olarak ismi “sitemap” ve uzantısı “.xml” olup sitemap.xml şeklinde websitesinin ana dizininde yer almaktadır.Bunun sebebi herhangi bir beşeri etken olmadan arama motorlarının ulaşabildiği sitemap yapısıdır.Websiteniz her güncellendiğinde veya websitenize her bir yeni sayfa girdiğinizde sitemap dosyanıza bu sayfa adresini eklemeniz gerekmektedir.Örnek bir sitemap dosyasını aşşağıdan görebilirsiniz.

sitemap-dosyasi-bemreuzuncomtr

Yukarda da görebileceğiniz gibi sitemap dosyaları URL , Priority , Cahnge Frequency ve LastChange diye tabir ettiğimiz 4 adet bölüm ile sınıflandırılıyorlar.

URL : Anasayfanız dahil websitenizde bulunan sayfaların adreslerinin yer aldığı bölümdür.

Priority : Web sayfasının önceliğini belirtmektedir.Arama motorlarının ilk olarak hangi sayfayı ziyaret etmesi geretiğini ve bu sayfanın ne denli önemli olduğunu arama motorlarına bildirmektedir.

Change Frequency : Web sayfasının ne kadar sıklıkla değiştiğini arama motorlarına belirtmektedir.Yukardaki örnekte de görebileceğiniz gibi anasayfa sürekli değişkenken alt sayfalardan bazıları günlük ve haftalık olarak değişebilmektedir.

LastChange : Bu web sayfasında en zon ne zaman değişiklik yapıldığını gösteren ibaredir.

Site haritaları bir çok hazır sistemlerde (WordPress , Joomla , DLE gibi) otomatik olarak oluşturulup güncellenebilmektedir.Benim de şahsen kullanmakta olduğum hazır sistem olan WordPress ‘i kullanan arkadaşlar varsa ” Google Sitemaps XML ” eklentisini indirip kurarak site haritalarını otomatik olarak her yazıdan sonra tek tıkla güncelleyebilirler.

Sosyal ağlarda paylaşın : Share on Google+1Tweet about this on TwitterShare on LinkedIn0Share on Facebook0

Benzer Yazılar

3 yorum. Yorum yapmak istiyorum!

Resul ACER
12 Ekim 2014 14:38

Sitemaps.xml ve robots.txt hızlı index alabilmek için çok önemlidir.Sitenizin hızlı index alması emek hırsızlarının sitenizdeki içerikleri çalarak sizi spam olarak göstermelerini engeller.Yazı gayet başarılı teşekkürler.

Cevapla

Ben Blogger kullanıyorum. Ancak bu konularda WordPress’in daha iyi olduğu bariz. Robots.txt dosyasının düzenlenmesi yakın zamana kadar Blogger’da yoktu, gelmesi en azından biraz daha iyi oldu.

Cevapla

Sitemaps.xml google botlarının sitenizi taraması ve sayfadaki bilgileri anlaması için önemli bir etken bu sayede indexlenmiş sayfa sayınızın artması ve google’da güzel bir yer edinmenizi sağlarsınız gerçektende

Cevapla

Bir Cevap Yazın

E-posta hesabınız yayımlanmayacak. Gerekli alanlar * ile işaretlenmişlerdir