AiReadinessBot tarayıcısı hakkında

Biz kimiz

Bir site kontrol hizmetinin tarayıcısıyız. İki nedenden biriyle geliriz: sahibi siteyi kontrol etmemizi istedi ya da birisi herkese açık bir adres için rapor istedi. Kendimizi şöyle tanıtırız:

AiReadinessBot/1.0 (+https://zikilo.com/bot)

Ne istiyoruz

• ana sayfa — iki kez: bir kez bot olarak, bir kez de web tarayıcısı olarak, aynı şeyi alıp almadıklarını görmek için
• robots.txt, sitemap.xml, llms.txt ve favicon
• kendi bağlantılarınızda bulunan en fazla 8 iç sayfa
• hangilerinin kırık olduğunu görmek için en fazla 15 bağlantı
• en fazla 8 görsel ve site haritasından en fazla 5 adres
• herkese açık olmaması gereken altı iyi bilinen adres: .git/config, .env, phpinfo.php, backup.zip, dump.sql, database.sql

Yalnızca okuruz. Form göndermeyiz, oturum açmayız, hiçbir şeyi değiştirmeyiz ve hiçbir parolayı denemeyiz. Her istek bir GET isteğidir.

Ne sıklıkta

• Bir kontrol en fazla yaklaşık 60 istektir, genellikle daha az.
• Kim isterse istesin ya da kaç adresten olursa olsun, siteniz saatte 6 defadan fazla kontrol edilmez. Abone olup izlememizi istediyseniz, üst sınır 30'dur — o zaman kendi sunucunuzu bilerek yükleyen sizsiniz.
• İzleme altındaki bir site, 20 saatte bir defadan daha sık yeniden kontrol edilmez.
• Bir ziyaretçi dakikada 5, saatte 30 kontrolden fazlasını başlatamaz.
• 5 dakika içinde tekrarlanan bir istek, sunucunuza yeni bir ziyaret yerine mevcut raporu alır.

Bizi nasıl engellersiniz

Bunu robots.txt dosyanıza ekleyin:

User-agent: AiReadinessBot
Disallow: /

Bizi adıyla belirten bir kural, istisnasız her zaman bizi bağlar — her ziyaretten önce robots.txt dosyasını kontrol ederiz.

Dürüst bir istisna: tüm botlar için geçerli genel bir kural (User-agent: *), sahibinin bizde etkin aboneliği olan ve izlememizi istediği bir sitede bizi durdurmaz. AiReadinessBot adını belirten bir kural, orada da bizi durdurur.

Bir şeyler ters gittiyse

Bize yazın: abuse@zikilo.com