جان مولر از گوگل تأیید کرد که GoogleBot الگوهای URL را که به سادگی در سایت شما کار نمی کنند، می خزند و می گیرد. منظورم این است که همه ما بارها و بارها با سایت هایی که مدیریت می کنیم این اتفاق را دیده ایم. اما جان اضافه کرد که خزیدن باید به مرور زمان کند شود زیرا گوگل این موضوع را تشخیص می دهد.
جان گفت ماستودون او سپس اضافه کرد: «معمولاً سیستم‌های ما الگوهای URL را انتخاب می‌کنند که کار نمی‌کنند و سرعت خزیدن برای آن‌ها را کاهش می‌دهند، بنابراین احتمالاً کمی بهتر می‌شود (اما همچنان این هشدارها را خواهید دید).
اگر نمی‌خواهید روی آن کلیک کنید، در اینجا یک اسکرین شات از مکالمه است.
این در مورد سایت هایی است که این اعلان کنسول جستجو را دریافت می کنند:
