بحث انجمن در Reddit.
گوگل می گوید عدم اجازه خزیدن یک راه فوق العاده سریع برای نمایه سازی یک سایت نیست
در این مطلب می توانید در مورد همه این موارد بیشتر بدانید سند راهنمای گوگل.
جان نوشت: “حتی اگر همه خزیدن را ممنوع کرده باشید، زمان زیادی طول می کشد تا کل سایت از بین برود، و به احتمال زیاد مواردی مانند صفحه اصلی فهرست شده باقی می مانند. آنچه در اینجا پست کرده اید بی ربط است. حدس من این است که شما این کار را کردید. چیزی کاملاً نامرتبط، مانند ارسال درخواست حذف سایت برای http:// (که همه نسخه‌ها را طبق مستند حذف می‌کند).
جان مولر از گوگل در پستی در Reddit که عدم اجازه Googlebot به خزیدن در سایت شما بلافاصله منجر به ایندکس کردن سایت نمی شود. او اضافه کرد که “مدتی طول می کشد تا کل سایت حذف شود” و ممکن است صفحه اصلی اصلا حذف نشود.
بنابراین اگر نیاز دارید که صفحه یا صفحات خود به سرعت حذف شوند، از درخواست حذف سایت در کنسول جستجوی گوگل استفاده کنید.