این ابزار درست کار نمیکند؟
این ابزار درست کار نمیکند؟
سازندهٔ robots.txt: اجازهٔ کامل، مسدود کردن کل سایت، یا مسیرهای خاص، crawl-delay و نقشهٔ سایت اختیاری؛ متن robots.txt را برای ریشهٔ سایت کپی کنید. پردازش سریع و محلی در مرورگر در صورت امکان.اول سرور ورودیها را چک میکند؛ تا دکمهٔ اجرا را نزنید، خبری از پردازش نیست.