Google попросили разделить боты для ИИ и поиска, но вряд ли она согласиться
Cloudflare хочет, чтобы Google разделил свои поисковые боты: одни — для обычной индексации сайтов, другие — для сбора данных для ИИ-резюме. Сейчас Google использует одни и те же боты для обоих целей, что якобы проблемно для сайтов, что не хотят, чтобы их контент использовался для обучения ИИ.
Cloudflare уже тестирует новые функции, позволяющие блокировать «ИИ-сканеры» или брать плату за доступ к контенту. Вот только многие владельцы сайтов обеспокоены, мол, блокируя ИИ, можно случайно испортить видимость сайта в поисковой выдаче.