Seo-Canavari
  Robots.txt Dosyası Ve Ayarları
 
Google web tarama botlarından sitenizde yer alan klasörlerinizi korumak istiyorsanız robots.txt dosyasını kullanmalısınız. Örneğin bir klasör (örnek olarak seo klasörü olsun) ve içerisinde yer alan tüm dosyalarınızı google botlarından bloklamak için yazmanız gereken kod :
User-agent: Googlebot
Disallow: /seo

Dosya tiplerini bloklamak için : ( Bu kod ile .gif dosyalarını indekslemesin diyoruz google botlarına)

User-agent: Googlebot
Disallow: /*.gif$

Dinamik web sayfalarını bloklamak için :

User-agent: Googlebot
Disallow: /*?

Ayrıca indexlenmesini istemediğiniz tekil sayfalar varsa metatag bölümüne aşağıdaki kodu ekleyerek botların o sayfayı indekslemesini önleyebilirsiniz :

<meta name="ROBOTS" content="NOINDEX, NOFOLLOW" />

Önemli Not : robots.txt dosyanızı sadece root klasörünüze atmalısınız. Alt klasörlere koymamalısınız! Tekil dosyalar için yukarıdaki metatagı kullanmanız faydalı olacaktır. Eğer robots.txt kullanmazsanız google botları varsayılan olarak sitenize ulaşabildiği (linklenmiş) tüm sayfa ve klasörleri indeksleyecektir.





Bu sayfa hakkındaki yorumlar:
Yorumu gönderen::04.01.2010, 20:35 (UTC)
xoyuncumx
xoyuncumx
Kapalı

robots.txt yi nasıl tr . gg ye ekliyoruz ftp yöntemiylemi?



Bu sayfa hakkında yorum ekle:
İsminiz:
E-mail adresiniz:
Mesajın:

 
  Bugün 35676 ziyaretçikişi burdaydı!  
 
=> Sen de ücretsiz bir internet sitesi kurmak ister misin? O zaman burayı tıkla! <=


Sponsor Olduğumuz WebSiteler:

Arrow Acemi-Rap Arrow Sizin Siteniz
Arrow vCopy Arrow Sizin Siteniz
Arrow demo-dizin Arrow Sizin Siteniz
Arrow Sizin Siteniz Arrow Sizin Siteniz