این اعلامیه اندکی پس از انتشار اخباری مبنی بر دسترسی Open AI به محتوای دارای دیوار پرداختی برای سرویس ChatGPT منتشر شد. اما می‌دانم که بسیاری از شما تعجب نمی‌کنید که گوگل و دیگران در حال بررسی جایگزین‌هایی برای robots.txt با این همه فناوری هوش مصنوعی مولد در سراسر وب هستند.
گوگل اضافه کرد که معتقد است “زمان آن رسیده است که جوامع وب و هوش مصنوعی ابزارهای قابل خواندن ماشینی اضافی را برای انتخاب و کنترل ناشر وب برای موارد استفاده از هوش مصنوعی و تحقیقاتی در حال ظهور کشف کنند.”
اجازه دادن به عبارات منظم در robots.txt چگونه است؟ من شرط می بندم که 75٪ از چالش های دستورالعمل خزنده را حل می کند که سئوکاران با آن مواجه می شوند.
– اریک هایکن (@EricHeiken) 6 جولای 2023
من از دیدن این اتفاق هیجان زده هستم. https://t.co/UTdmeCVwhl
— جان مولر (رسمی) · نه #30D (@JohnMu) 6 جولای 2023
اگر می خواهید شرکت کنید، پر کنید این فرم.
گری ایلیس از گوگل، که در طول سال ها روی این پروتکل کار می کرد، در این مورد نوشت لینکدین، “زمان آن فرا رسیده است. تقریباً 30 سال پیش robots.txt متولد شد و در تمام این مدت به خوبی به اینترنت خدمت کرد. با فناوری های نوظهور هوش مصنوعی، ما باید آن را با دستورالعمل ها (قوانین) جدیدی که به طور خاص برای برنامه های کاربردی هوش مصنوعی طراحی شده اند تکمیل کنیم.”
و جان مولر:
گوگل اعلام کرد شب گذشته که به دنبال توسعه یک پروتکل مکمل برای پروتکل 30 ساله robots.txt است. این به دلیل تمام فناوری‌های جدید هوش مصنوعی است که گوگل و سایر شرکت‌ها منتشر می‌کنند.
همه اینها در حال حاضر به چه معناست، من نمی دانم. اما در اینجا چند پاسخ به توییت من در مورد آن وجود دارد:
گوگل نوشت: “امروز، ما یک بحث عمومی را آغاز می کنیم و از اعضای وب و جوامع هوش مصنوعی دعوت می کنیم تا روی رویکردهای پروتکل های مکمل بررسی کنند. ما طیف گسترده ای از صداها را از ناشران وب، جامعه مدنی و دانشگاه می خواهیم. و زمینه‌های بیشتری از سراسر جهان برای پیوستن به این بحث، و ما علاقه‌مندان را در ماه‌های آینده دعوت خواهیم کرد.»
آیا هیچ کدام از شما ایده ای دارید؟
امروز، ما یک بحث عمومی را آغاز می کنیم تا ابزاری قابل خواندن توسط ماشین برای انتخاب ناشر وب و کنترل موارد استفاده از هوش مصنوعی و تحقیقاتی در حال ظهور را بررسی کنیم. درباره این تلاش بیشتر بیاموزید، از جمله نحوه پیوستن به بحث با ثبت نام: https://t.co/iF9WNyhN3O
— Google SearchLiaison (@searchliaison) 6 جولای 2023
من فکر می کنم خوب کار می کند، اگرچه ممکن است بعد از 30 سال به robots.xml یا چیزی تبدیل شود زیرا موارد زیادی اضافه شده است، و فایل ساختاریافته ممکن است بیشتر مستعد خطاهای تصادفی باشد.
— میلوش میلوسنیچ (@mileusna) 6 جولای 2023
“اکنون که ما قبلاً LLM های خود را در مورد تمام محتوای اختصاصی و دارای حق چاپ شما آموزش داده ایم، در نهایت به فکر این خواهیم بود که راهی به شما ارائه دهیم تا از هر یک از محتوای آینده خود برای استفاده برای ثروتمند کردن ما استفاده نکنید.” https://t.co/dda8hHQPfq
– بری آدامز 📰 (@badams) 6 جولای 2023
امروز هیچ چیز تغییر نمی کند، تنها چیزی که گوگل اعلام کرد این بود که در “ماه های آینده” آنها با “جامعه” گفتگو خواهند کرد تا ایده های جدیدی برای راه حل جدید ارائه دهند.
بحث انجمن در توییتر.