SEO Röntgen

DTSBot hakkında

Sunucu kayıtlarınızda bu adı gördüyseniz doğru yerdesiniz.

Ne yapıyor

Bu bot, birisi sitenizin adresini bu sitedeki analiz araçlarından birine yapıştırdığında çalışır. Sayfayı indirir, başlık ve içerik yapısını ölçer, sonucu o kişiye gösterir. Kendiliğinden, sürekli tarama yapmaz.

Uyduğu kurallar

✓ robots.txt
Kurallarınıza uyar. Yasakladığınız adresleri indirmez.
✓ Crawl-delay
robots.txt'de belirttiğiniz bekleme süresine uyar.
✓ Hız sınırı
Aynı siteye istekler arasında en az 1000 milisaniye bekler, saatte en fazla 300 istek yapar.
✓ Dürüst kimlik
Kendini tarayıcı gibi göstermez. User-Agent değerinde adı ve bu sayfanın adresi bulunur.

Tamamen engellemek isterseniz

robots.txt dosyanıza şu satırları ekleyin, bot bir sonraki ziyaretinde uyar:

User-agent: DTSBot
Disallow: /

DTS tarayıcı botu

DTS tarama davranışı, robots.txt uyumu ve istek sınırları hakkında bilgi.