Robots.txt Oluşturucu

Arama Motoru Optimizasyonu

Robots.txt Oluşturucu


Varsayılan - Tüm Robotlar:  
    
Tarama Gecikmesi:
    
Site Haritası: (yoksa boş bırakın) 
     
Robotlarda Ara: Google
  Google Image
  Google Mobile
  MSN Search
  Yahoo
  Yahoo MM
  Yahoo Blogs
  Ask/Teoma
  GigaBlast
  DMOZ Checker
  Nutch
  Alexa/Wayback
  Baidu
  Naver
  MSN PicSearch
   
Yasaklı Dizinler: Yol kökten göreli ve sonunda eğik çizgi içermelidir "/"
 
 
 
 
 
 
   



Şimdi, kök dizininize robots.txt dosyası oluşturun, yukarıdaki metni kopyalayıp metin dosyasına yapıştırın.


Hakkında Robots.txt Oluşturucu

Web yöneticilerinin çoğu, bir robots.txt dosyası nedir ve neden herhangi bir web sitesi için çok önemli olduğunu bilir ancak ana noktaları özetleyelim. Robots.txt dosyası, arama motorlarına sitenizin hangi alanları ziyaret etmemeleri gerektiğini söylemenizin bir yoludur. Dolayısıyla, bir robots.txt dosyası, sitenizin belirli sayfalarını arama motorlarının gözlerinden uzak tutmanıza ve böylece:

- Yinelenen içerik sorunlarını ortadan kaldırır.
- Özel verilerinizi arama listelerinin dışında tutun.
- Eski ve artık alakalı olmayan içeriği gizler.
- Sitenizin arama motorlarına karşı kolay görünmeyebilecek teknik sorunları örter.
- Sitenizin tarama ve dizine eklenme biçimini hızlandırır.