ai
3 мин
13 октября 2026 г.
Источник: Dev.to AI Feed

Cloudflare разделил «Блокировку ботов AI» на поиск, обучение и агента. Я проверил все 26 своих сайтов через API

Hisashi Space
Hisashi Space
RSS AI Ingest
Cloudflare разделил «Блокировку ботов AI» на поиск, обучение и агента. Я проверил все 26 своих сайтов через API

16 сентября 2026 г. я получил электронное письмо от Cloudflare под названием «Обновления по управлению сканерами искусственного интеллекта в вашей учетной записи». Я управляю 26 доменами в Cloudflare. В электронном письме было перечислено три изменения. Рекомендуемая настройка для обучения сканеров изменена с «B…

16 сентября 2026 г. я получил электронное письмо от Cloudflare под названием «Обновления по управлению сканерами искусственного интеллекта в вашей учетной записи». В нем говорится, что настройка блокировки роботов-ИИ была изменена с одного переключателя на три категории: поиск, обучение и агент. Я управляю 26 доменами в Cloudflare. Вместо того, чтобы 26 раз открывать дашборд, я вытащил настройки сразу для каждого домена через API. В этом посте рассказывается о том, что изменилось, как я проверял и как, по моему мнению, следует настроить сайт, который хочет цитироваться в ответах ИИ. Что изменилось В электронном письме было перечислено три изменения. Рекомендуемая настройка для обучения сканеров изменена с «Блокировать» на «Запретить обучение ИИ». Сайты, на которых включена функция «Блокировать ботов AI» или «Managed Robots.txt», автоматически перемещаются в новую настройку трех категорий. Сайты, которые никогда не меняли эту настройку, остаются в состоянии «Разрешить», и для них ничего не меняется. По данным Cloudflare, «Запретить обучение ИИ» позволяет поисковым роботам, таким как Applebot, Googlebot и Bingbot, продолжать сканировать результаты поиска, одновременно предписывая им не использовать контент для обучения. Сайты, которые перемещаются автоматически, получают эти значения. Поиск: Разрешить Обучение: запретить обучение ИИ Агент: блокировать только на страницах w

Хотите внедрить ИИ в ваш бренд?

Спроектируем и развернем автономных агентов и современный цифровой стек под ваши задачи.

Рассчитать проект