گوگل اسناد خزنده و واکشی گوگل خود را کمی به روز کرده است تا بگوید پروتکل HTTP/1.1 و HTTP/2 را انتخاب می کند که “بهترین عملکرد خزیدن” را برای Googlebot ارائه می دهد. در واقع، در صورت نیاز، حتی ممکن است پروتکل ها را بین جلسات تغییر دهد.
تغییر سند به قدری کوچک بود که گوگل حتی تغییر سند را در صفحه به روز رسانی خود ثبت نکرد.
گوگل نوشت:
خزنده‌ها و واکشی‌های Google از HTTP/1.1 و HTTP/2 پشتیبانی می‌کنند. خزنده ها از نسخه پروتکلی استفاده می کنند که بهترین عملکرد خزیدن را ارائه می دهد و ممکن است بسته به آمار خزیدن قبلی، پروتکل ها را بین جلسات خزیدن تغییر دهند. نسخه پیش فرض پروتکل مورد استفاده توسط خزنده های گوگل HTTP/1.1 است. خزیدن بر روی HTTP/2 ممکن است منابع محاسباتی (مثلاً CPU، RAM) را برای سایت شما و Googlebot ذخیره کند، اما در غیر این صورت هیچ مزیت خاصی برای محصول Google برای سایت وجود ندارد (به عنوان مثال، عدم افزایش رتبه در جستجوی Google). برای انصراف از خزیدن بر روی HTTP/2، به سروری که سایت شما را میزبانی می کند دستور دهید تا زمانی که Google تلاش می کند از طریق HTTP/2 به سایت شما دسترسی پیدا کند، با کد وضعیت HTTP 421 پاسخ دهد. اگر این امکان پذیر نیست، می توانید یک پیام به تیم Crawling ارسال کنید (البته این راه حل موقتی است).
گوگل در نوامبر 2020 شروع به خزیدن با استفاده از HTTP/2 برای تعداد محدودی URL کرد و یک سال بعد حدود نیمی از وب را در آن پروتکل خزیدن کرد. HTTP/2 منفعت مستقیمی برای SEO ندارد و نمی توانید گوگل را مجبور کنید که روی HTTP/2 بخزد.
Gagan Ghotra این تغییر را مشاهده کرد و در X نوشت که اسناد در 19 نوامبر به روز شده است. او این را قبل و بعد دارد که البته من تأیید کردم:
بحث انجمن در X.