دربارهٔ خزندهٔ AiReadinessBot
اگر این نشانی را در لاگهای خود یافتید، این صفحه برای شماست. میگوید ما که هستیم، چه چیزی میخواهیم، هر چند وقت یک بار، و چگونه ما را ببندید.
ما که هستیم
ما خزندهٔ یک سرویس بررسی سایت هستیم. به یکی از دو دلیل میآییم: مالک از ما خواسته سایت را بررسی کنیم، یا کسی گزارشی دربارهٔ یک نشانی عمومی خواسته است. خودمان را اینگونه معرفی میکنیم:
AiReadinessBot/1.0 (+https://zikilo.com/bot)چه چیزی میخواهیم
- صفحهٔ اصلی — دو بار: یک بار بهعنوان خزنده، یک بار بهعنوان مرورگر، تا ببینیم آیا هر دو یک چیز دریافت میکنند
- robots.txt، sitemap.xml، llms.txt و favicon
- تا 8 صفحهٔ درونی که در پیوندهای خودتان پیدا میشوند
- تا 15 پیوند، تا ببینیم کدامها شکستهاند
- تا 8 تصویر و تا 5 نشانی از نقشهٔ سایت
- شش نشانی شناختهشده که نباید عمومی باشند: .git/config، .env، phpinfo.php، backup.zip، dump.sql، database.sql
ما فقط میخوانیم. فرمی ارسال نمیکنیم، وارد نمیشویم، چیزی را تغییر نمیدهیم و هیچ رمزی را امتحان نمیکنیم. هر درخواست یک GET است.
هر چند وقت یک بار
- هر بررسی حداکثر حدود 60 درخواست است، معمولاً کمتر.
- سایت شما بیش از 6 بار در ساعت بررسی نمیشود، فرقی نمیکند چه کسی یا از چند نشانی درخواست دهد. اگر اشتراک گرفتهاید و از ما خواستهاید آن را زیر نظر بگیریم، سقف 30 است — در این صورت این خود شمایید که آگاهانه سرور خود را بار میگذارید.
- سایتی که زیر پایش است بیش از یک بار در هر 20 ساعت دوباره بررسی نمیشود.
- یک بازدیدکننده نمیتواند بیش از 5 بررسی در دقیقه و 30 در ساعت آغاز کند.
- یک درخواست تکراری در بازهٔ 5 دقیقه، بهجای بازدید تازه از سرور شما، گزارش موجود را دریافت میکند.
چگونه ما را ببندید
این را به robots.txt خود بیفزایید:
User-agent: AiReadinessBot
Disallow: /قاعدهای که نام ما را ذکر کند همیشه و بدون استثنا برای ما الزامآور است — ما پیش از هر بازدید robots.txt را بررسی میکنیم.
یک استثنای صادقانه: یک قاعدهٔ فراگیر برای همهٔ رباتها (User-agent: *) ما را روی سایتی که مالکش اشتراک فعالی نزد ما دارد و از ما خواسته آن را زیر نظر بگیریم، متوقف نمیکند. قاعدهای که نام AiReadinessBot را ذکر کند، ما را آنجا هم متوقف میکند.
اگر چیزی نادرست پیش رفت
برای ما بنویسید: abuse@zikilo.com