Инструменты и интеграции с точки зрения операций

Главное

Cloudflare запустила ускоренную верификацию для AI-ботов и агентов

Cloudflare запустила упрощённую процедуру верификации для разработчиков AI-ботов и агентов, желающих попасть в каталог BotBase. Операторы сайтов на Cloudflare теперь могут надёжнее отличать легитимные AI-краулеры (поисковые ассистенты, шопинг-агенты) от неподтверждённых скрейперов и настраивать правила доступа соответственно.

Что меняется для операций — Если сайт компании работает через Cloudflare, это напрямую влияет на её видимость для AI-ассистентов вроде ChatGPT или Perplexity, когда потенциальные клиенты просят у них рекомендации поставщиков. Верифицированный статус бота позволяет уверенно пропускать конкретные AI-краулеры через правила файрвола вместо блокировки всего бот-трафика из осторожности — а это раньше рисковало отрезать страницы товаров, документацию и цены от AI-генерируемых ответов. Кроме того, неверифицированных агентов, скрейпящих сайт под чужой личиной, теперь легче выявлять и блокировать, что снижает лишнюю нагрузку на сервер и риск автоматизированных злоупотреблений через формы обратной связи или чат поддержки.

Cloudflare запускает единую настройку правил для AI-краулеров на всех сайтах

Большинство B2B-компаний с 10–200 сотрудниками ведут несколько веб-ресурсов — маркетинговый сайт, документацию, блог, справочный центр — часто на разных платформах, и каждая требует отдельных правил для AI-краулеров. Bot Preference Sync позволяет отделу маркетинга или IT задать политику доступа один раз (например, разрешить ChatGPT и Perplexity цитировать контент, но заблокировать ботов, собирающих данные для обучения моделей), и она применится единообразно — без ручной правки robots.txt на каждом поддомене. Это напрямую влияет на видимость в AI-поиске: правильное цитирование в AI Overviews или ответах чат-ботов зависит от того, могут ли краулеры читать нужные страницы, оставляя закрытыми чувствительные разделы. Оговорка в том, что синхронизация работает только там, где принимающая платформа поддерживает систему Cloudflare, поэтому она пока не заменяет ручной контроль везде, где размещён контент.