گوگل یک ربات جدید برای مشتریان تجاری هوش مصنوعی و مستنداتی را برای صاحبان سایت برای ردیابی بازدیدهای خود راه اندازی کرد.
گوگل بی سر و صدا یک ربات جدید را به مستندات خزنده خود اضافه کرد که از طرف مشتریان تجاری محصول هوش مصنوعی Vertex آنها می خزد. به نظر می رسد که خزنده جدید ممکن است فقط سایت های کنترل شده توسط صاحبان سایت را خزد، اما مستندات در این مورد کاملا روشن نیست.
عوامل هوش مصنوعی Vertex
Google-CloudVertexBot، خزنده جدید، محتوای وب سایت را برای کلاینت های هوش مصنوعی Vertex دریافت می کند، برخلاف سایر ربات های فهرست شده در مستندات Search Central که به جستجوی Google یا تبلیغات مرتبط هستند.
مستندات رسمی Google Cloud اطلاعات زیر را ارائه می دهد:
در Vertex AI Agent Builder، انواع مختلفی از فروشگاه های داده وجود دارد. یک ذخیره داده می تواند فقط یک نوع داده داشته باشد.
در ادامه شش نوع داده را فهرست می کند که یکی از آنها داده های وب سایت عمومی است. در خزیدن مستندات می گوید که دو نوع خزیدن وب سایت با محدودیت های خاص برای هر نوع وجود دارد.
- نمایه سازی اولیه وب سایت
- نمایه سازی پیشرفته وب سایت
مستندات گیج کننده است
مستندات داده های وب سایت را توضیح می دهد:
یک ذخیره داده با داده های وب سایت از داده های نمایه شده از وب سایت های عمومی استفاده می کند. می توانید مجموعه ای از دامنه ها را ارائه دهید و جستجو یا توصیه هایی را روی داده های خزیده شده از دامنه ها تنظیم کنید. این داده ها شامل متن و تصاویر برچسب گذاری شده با ابرداده است.
توضیحات بالا چیزی در مورد تأیید دامنه ها نمی گوید. توضیحات نمایه سازی پایه وب سایت نیز چیزی در مورد تأیید مالک سایت نمی گوید.
اما مستندات برای نمایه سازی وب سایت پیشرفته می گوید که تأیید دامنه مورد نیاز است و همچنین سهمیه نمایه سازی را تحمیل می کند.
با این حال، مستندات خود خزنده می گوید که خزنده جدید بر اساس “درخواست صاحبان سایت” می خزد، بنابراین ممکن است به سایت های عمومی نخزد.
اکنون قسمت گیج کننده اینجاست، نماد تغییرات برای این خزنده جدید نشان می دهد که خزنده جدید می تواند سایت شما را ضبط کند.
در اینجا چیزی است که تغییرات می گوید:
خزنده جدید برای کمک به صاحبان سایت در شناسایی ترافیک خزنده جدید معرفی شد.
خزنده جدید Google
خزنده جدید Google-CloudVertexBot نام دارد.
این اطلاعات جدید در مورد آن است:
“Google-CloudVertexBot هنگام ساخت Vertex AI Agents سایت ها را به درخواست صاحبان سایت می خزد.
توکن های عامل کاربر
- Google-CloudVertexBot
- Googlebot”
زیررشته
عامل کاربر Google-CloudVertexBot
مستندات نامشخص
به نظر می رسد مستندات نشان می دهد که خزنده جدید سایت های عمومی را فهرست نمی کند، اما تغییرات نشان می دهد که اضافه شده است تا صاحبان سایت بتوانند ترافیک خزنده جدید را شناسایی کنند. آیا باید خزنده جدید را با robots.txt مسدود کنید؟ با توجه به اینکه مستندات در مورد اینکه آیا فقط دامنه هایی را که تأیید شده اند تحت کنترل نهادی که خزیدن را آغاز می کند، نسبتا نامشخص است یا خیر، غیرمنطقی نیست.
مستندات جدید Google را بخوانید:
