DijentaBot

Kimliği

Tüm isteklerimiz aşağıdaki User-Agent dizesiyle gelir. Dizedeki bağlantı bu sayfaya açılır.

Mozilla/5.0 (compatible; DijentaBot/0.1; +https://dijentaseo.com/bot)

Sitenizi yormamak için uyduğu sınırlar

• Site başına en çok 4 eşzamanlı sayfa isteğiSayfalarınızı aynı anda bundan fazla istekle okumaz. Taramanın başında robots.txt, site haritası ve birkaç kısa kontrol (favicon, http ve www yönlendirmeleri, var olmayan bir adresin yanıtı, llms.txt) birer kez istenir. robots.txt dosyanızda bizim için Crawl-delay yazdıysanız sayfaları tek bağlantıyla okur ve istekler arasında bekler (en çok 2 saniye).
• İstek başına 15 saniye zaman aşımıYanıt vermeyen bir sayfayı beklemeden bırakır ve devam eder. Bir sayfadan en çok 5 MB okur; görsel, PDF gibi HTML olmayan dosyaların gövdesini indirmez. En çok kullanılan 40 görselin yalnız açılıp açılmadığını ve boyutunu sorar (HEAD isteği). robots.txt, site haritası ve varsa llms.txt dosyanızı okur.
• Yalnız herkese açık sayfalarParola ya da oturum gerektiren alanlara girmez, form göndermez, çerez taşımaz. İç ağ adreslerine hiçbir koşulda bağlanmaz.
• robots.txt kurallarınıza uyarÖnce kendi adına yazılmış grubu, yoksa tüm botlar (*) için yazılanı uygular; engellenen adresleri hiç istemez. rel="nofollow" bağlantıları izlemez.
• Sınırlı süre ve sayfaBir denetim, kullanıcının paketine göre 100 ile 10.000 sayfa arasında durur ve en çok 30 dakika sürer.
• Ne zaman gelir?Bir kullanıcı sitesini ekleyip denetim başlattığında, ücretli paketlerde haftalık otomatik denetimde ve ana sayfamızdaki ücretsiz analizde (en çok 50 sayfa; aynı site 10 dakikada bir kez).

robots.txt ile engelleme

Sitenizin tamamını kapatmak için kök dizindeki robots.txt dosyasına şunu ekleyin:

User-agent: DijentaBot
Disallow: /

Yalnız bazı bölümleri kapatmak ya da taramayı yavaşlatmak isterseniz:

User-agent: DijentaBot
Disallow: /yonetim/
Disallow: /sepet/
Crawl-delay: 2

Değişiklik bir sonraki taramada geçerli olur. robots.txt dosyanıza sunucu hatası yüzünden ulaşılamazsa DijentaBot taramayı durdurmaz; tek bağlantıyla ve istekler arasında 1 saniye bekleyerek temkinli ilerler ve durumu site sahibine hata olarak raporlar.

Hız ölçümleri bu kimliği taşımaz

Hız ölçümünde sayfanız ayrı bir ölçüm altyapısında, gerçek bir tarayıcıyla açılır. Bu istekler DijentaBot kimliği taşımaz; sunucu günlüklerinizde bir tarayıcı ziyareti olarak görünür.

Bir sorun mu var?

Tarayıcımızın sitenizde beklenmedik bir yük oluşturduğunu düşünüyorsanız ya da alan adınızın hiç taranmamasını istiyorsanız [email protected] adresine yazın. User-Agent dizesi taklit edilebilir; şüphelendiğiniz isteklerin tarih, saat ve IP bilgisini eklerseniz inceleyebiliriz.