Чтобы страница появилась среди источников ответа ChatGPT, поисковой системе сначала нужно узнать о её существовании и получить доступ к содержанию. Даже полезная инструкция может оставаться незамеченной, если до неё трудно добраться. Новый эксперимент Cloudflare и OpenAI показывает, как компании пытаются решить эту задачу. Владельцу сайта он даёт повод проверить доступность важных страниц и их содержание.

Что удалось обнаружить в эксперименте

15 октября 2026 года Cloudflare опубликовала первые результаты исследования, начавшегося в июле. Сигналы её сети помогают поисковому роботу OpenAI находить страницы, о которых тот раньше не знал, и определять, какие адреса стоит посетить.

По данным участников, эксперимент охватил около 1% сети Cloudflare и позволил OpenAI обнаружить и проиндексировать сотни миллионов новых страниц. Это заявленный результат пилота. В публикации нет данных, которые позволяли бы обещать отдельному магазину дополнительное число покупателей.

Cloudflare помогает обнаруживать адреса, а OpenAI самостоятельно оценивает найденные страницы и их соответствие запросу. Поэтому наличие сайта в инфраструктуре Cloudflare само по себе не означает преимущества в ответах ChatGPT.

Почему одного найденного адреса недостаточно

В ходе исследования компании столкнулись с несуществующими страницами, на которые часто обращаются боты, переадресациями на главную и копиями одного материала. Отсев таких адресов позволяет сократить бесполезные обращения. Участники также тестируют сигналы изменений, чтобы повторно посещать страницу тогда, когда на ней появилось что-то новое.

Для владельца магазина полезный вопрос звучит так: что человек получит, открыв конкретную страницу? Например, запрос о совместимости фильтра с моделью вытяжки лучше обслужит карточка с точным перечнем моделей и размерами. Общая фраза «подходит для большинства вытяжек» оставляет покупателя с тем же вопросом. Это редакционный пример: он объясняет, какую информацию стоит подготовить, но не устанавливает правило ранжирования ChatGPT.

Начните с вопросов, которые уже задают менеджерам. Условия монтажа, комплектация, совместимость, ограничения доставки и порядок обслуживания помогают принимать решения. Для каждого ответа должен быть понятный адрес, на который сотрудник может дать ссылку покупателю.

Доступ к поиску и использование для обучения настраиваются отдельно

В документации OpenAI о роботах разделены OAI-SearchBot, который обслуживает поиск ChatGPT, и GPTBot, предназначенный для сбора материалов, которые могут использоваться при обучении моделей. Их правила независимы: можно разрешить поисковый обход и запретить GPTBot.

Если владелец хочет, чтобы материалы могли появляться в поисковых ответах, OpenAI рекомендует разрешить OAI-SearchBot в robots.txt и убедиться, что защита сервера пропускает запросы с опубликованных адресов робота. Запрет OAI-SearchBot исключает сайт из поисковых ответов, хотя навигационная ссылка на него всё ещё может появиться. Разрешение обхода, со своей стороны, не гарантирует показ.

Проверять нужно и файл robots.txt, и настройки защиты сайта. Бывает, что формального запрета нет, но запрос получает страницу проверки посетителя. Передайте эту проверку администратору: открывать доступ ко всем закрытым разделам или отключать защиту целиком для неё не требуется.

Что проверить на собственном сайте

Для начала достаточно выбрать пять–десять страниц, которые помогают клиентам решить конкретную задачу. Ниже — рабочий список для их проверки. Это рекомендации по подготовке сайта, а не перечень обязательных условий участия в пилоте.

Как понять, есть ли польза для бизнеса

Визит поискового робота, ссылка в ответе и обращение покупателя — разные события. Сначала администратор может подтвердить обход по журналам сервера. Затем можно наблюдать, какие материалы появляются в ответах на выбранные вопросы. Для оценки бизнеса нужны уже переходы, обращения и заказы, которые удаётся связать с этим источником.

Сохраняйте дату проверки, формулировку вопроса и полученный ответ. Единичное появление ссылки ещё не показывает устойчивую видимость, а её отсутствие в одном ответе не доказывает техническую проблему. Менять сайт удобнее небольшими группами страниц: так проще сопоставить сделанные исправления с дальнейшими наблюдениями.

В публикации Cloudflare прямо сказано, что влияние лучшего обнаружения на бизнес-результаты ещё предстоит исследовать. Поэтому ближайшая полезная работа для владельца — устранить известные препятствия и сделать важные ответы доступными по понятным адресам. Такие страницы пригодятся покупателям, менеджерам и обычному поиску уже во время этой работы.