خزیدن سایت با خطا مواجه میشود یا گیر میکند
اگر بعد از وارد کردن آدرس سایت، وضعیت خزیدن مدت طولانی روی «در حال جستوجو» میماند یا صفحات زیادی با وضعیت «ناموفق» علامت میخورند، این موارد را بررسی کنید.
سایت پشت یک محافظ ضد ربات است
اگر سایتتان از سرویسهایی مثل Cloudflare در حالت محافظت شدید، یا یک reCAPTCHA برای بازدیدکنندههای جدید استفاده میکند، ممکن است خزندهی میراکل هم مثل یک ربات مشکوک مسدود شود. راهحل معمول این است که آدرس/User-Agent خزندهی میراکل را در فهرست استثناهای همان سرویس امنیتی قرار دهید — تیم پشتیبانی میتواند این اطلاعات را در اختیارتان بگذارد.
سایت به یک سرور داخلی/خصوصی اشاره میکند
به دلایل امنیتی (به «ایزوله بودن دادههای هر مشتری» مراجعه کنید)، میراکل هرگز آدرسهایی که به شبکهی داخلی یا خصوصی اشاره دارند را نمیخزد — مثلاً یک سایت روی localhost یا یک آیپی داخلی شبکه. سایت باید از اینترنت عمومی قابلدسترس باشد.
صفحات زیادی «پیدا نشد (۴۰۴)» هستند
این یعنی نقشهی سایت (Sitemap) یا لینکهای داخلی سایتتان به آدرسهای حذفشده اشاره میکنند. این مشکل معمولاً مربوط به خود سایت است، نه میراکل — بهتر است نقشهی سایتتان را بهروزرسانی کنید.
سقف فضای ذخیرهسازی پلن پر شده («بیش از سقف»)
اگر صفحات با وضعیت «بیش از سقف» علامت میخورند، یعنی فضای دانش پلن فعلیتان پر شده. از «تنظیمات → پلنها و اشتراک» فضای مصرفی را چک کنید؛ یا منابع قدیمی/کماهمیتتر را حذف کنید، یا پلن را ارتقا دهید.
صفحاتی که نمیخواهید خزیده شوند
اگر خزنده وارد بخشهایی مثل وبلاگ یا صفحات دستهبندی میشود که برای دانش ربات مفید نیستند، از دکمهی ویرایش همان منبع، در تب «تنظیمات پیشرفته»، مسیرهای موردنظر را مستثنی کنید — جزئیات کامل در «منابع دانش» آمده.