İçeriğe geç

PageWatch

PageWatch botu

Sunucu günlüğünüzde ByMuhendisToolsPageWatch adlı bir ziyaretçi gördüyseniz, PageWatch kullanıcılarından biri sitenizdeki bir sayfayı izliyor demektir.

Ne yapıyor?

Bir kullanıcının verdiği tek bir sayfayı, kullanıcının seçtiği aralıkla (en sık saatte bir) indirir ve metnindeki değişikliği arar. Bağlantıları izleyip siteyi taramaz, görsel ya da betik indirmez, form göndermez.

Kimliği

Her istek şu User-Agent ile gelir: ByMuhendisToolsPageWatch/1.0 (+https://tools.bymuhendis.com/pagewatch/bot). Kimliğimizi gizlemiyor, tarayıcı taklidi yapmıyoruz.

Nasıl engellenir?

robots.txt dosyanıza "User-agent: ByMuhendisToolsPageWatch" ve altına "Disallow: /" yazmanız yeterli. robots.txt'yi 24 saatte bir okuruz; engel en geç bir gün içinde geçerli olur ve o sayfalar için izleme kurulamaz.

Yük

Aynı siteye iki istek arasında en az birkaç saniye bekleriz. 403 ya da 429 yanıtı alırsak o kontrolü başarısız sayar, yeniden denemeyle üstünüze gelmeyiz. Bir sorun görürseniz bymuhendis.com üzerinden bize yazın.

User-agent: ByMuhendisToolsPageWatch
Disallow: /

PageWatch