محدودیت 15 مگابایت Googlebot برای هر منبع فرعی است

Googlebot می تواند 15 مگابایت اول یک فایل HTML یا فایل مبتنی بر متن پشتیبانی شده را بخزد. هر منبعی که در HTML ارجاع می شود مانند تصاویر، ویدئوها، CSS و جاوا اسکریپت به طور جداگانه واکشی می شوند. پس از 15 مگابایت اول فایل، Googlebot خزیدن را متوقف می کند و فقط 15 مگابایت اول فایل را برای نمایه سازی در نظر می گیرد. محدودیت اندازه فایل روی داده های فشرده نشده اعمال می شود. سایر خزنده های Google ممکن است محدودیت های متفاوتی داشته باشند.

این سند کمک اکنون می خواند:

Googlebot می تواند 15 مگابایت اول یک فایل HTML یا فایل مبتنی بر متن پشتیبانی شده را بخزد. هر منبع ارجاع شده در HTML مانند CSS و جاوا اسکریپت به طور جداگانه واکشی می شود و هر واکشی با محدودیت اندازه فایل یکسان محدود می شود. پس از 15 مگابایت اول فایل، Googlebot خزیدن را متوقف می کند و فقط 15 مگابایت اول فایل را برای نمایه سازی در نظر می گیرد. محدودیت اندازه فایل روی داده های فشرده نشده اعمال می شود. سایر خزنده های Google، برای مثال Googlebot Video و Googlebot Image، ممکن است محدودیت های متفاوتی داشته باشند.

گری اضافه کرد لینکدین، "PSA از صندوق ورودی من: آستانه واکشی منبع 15 مگابایتی در منابع جاوا اسکریپت نیز اعمال می شود، بنابراین اگر فایل های جاوا اسکریپت شما بزرگتر از آن باشد، ممکن است سایت شما در جستجوی گوگل بدی داشته باشد. برای اطلاعات در مورد واکشی به googlebot.com مراجعه کنید. ویژگی ها و محدودیت ها. بله، منابع جاوا اسکریپت بزرگ تر از 15 مگابایت وجود دارد. خیر، داشتن فایل های جاوا اسکریپت به این بزرگی ایده خوبی نیست."