Вот как это может выглядеть в салоне: клиентка пишет помощнику на ИИ в чате «запиши меня на стрижку в субботу», а форму на сайте заполняет программа. Хозяйка видит обычную заявку и не знает, что записывал не человек.
Закрываться от таких гостей я бы не стал, а сначала проверил бы путь до заявки: за агентом стоит живой клиент. ИИ-агенты по просьбе человека сами открывают страницы на сайте, заполняют формы и оформляют заказы; что это такое и чем они отличаются от чат-бота, я разбирал отдельно. Хватит одного вечера, порядок ниже.
Крупные зарубежные сайты, от авиакомпании Delta до сервиса отзывов Yelp, уже закрываются от агентов. А в России, по пресс-релизу Яндекса от июня 2026 года, похожий агент есть у Алисы AI и записывает в рестораны и салоны. Споткнётся он о защиту, и заявки не будет, а другое место агент подсказать умеет.
Чем агент ИИ на сайте отличается от поискового робота
Первое желание понятное: закрыть сайт от роботов файлом правил. Такой файл (robots.txt) есть у сайта: в нём владелец пишет, куда роботам можно, а куда нет. Google в справке прямо предупреждает: файл не может заставить робота подчиниться, соблюдать его или нет, решает сам робот.
OpenAI пишет, что для посещений по просьбе пользователя правила файла «могут не действовать». Google говорит то же: такие запросы обычно не смотрят в robots.txt.
Я бы сначала различал гостей по тому, зачем они пришли. Поисковый робот Яндекса обходит страницы, чтобы показать их в поиске. Сервис защиты сайтов Cloudflare в документации делит ИИ-ботов на 3 группы. Одни собирают страницы для поиска, чтобы потом отвечать на вопросы. Другие забирают тексты, чтобы учить на них нейросети. Третьих называют агентами: они действуют прямо сейчас и за конкретного человека, как его руки на клавиатуре. Остановить агента ИИ на сайте может уже не файл, а защита от ботов, которую ставят на сайт.
Крупные сайты закрываются, и у каждого своя причина
Американское издание The Verge собрало, какие крупные сайты закрываются от агентов и по какой причине. Yelp, по его словам, пускает только агентов, которые платят за его данные. 2 банка, JPMorgan Chase и Charles Schwab, не пускают их в счета клиентов ради безопасности.
Дольше всех спорят Amazon и Perplexity, компания, которая сделала агента-покупателя. Amazon закрыл для него магазин и подал в суд: компании вроде Perplexity, по его словам, должны работать открыто и уважать выбор магазина: участвовать ему или нет. Perplexity отвечает, что агент работает как продолжение покупателя, а магазину не нравится, что перед его рекламой окажется меньше людей. Спор идёт в судах.
Shopify, платформа, на которой работают интернет-магазины, пошла обратным путём и открыла агентам свою сеть магазинов.
Я смотрю на этот список так: у салона с формой записи нет ни платных данных, как у Yelp, ни счетов клиентов, как у банка, ни витрины с рекламой, как у Amazon. Причины гигантов к нему почти не подходят.
Сайт может закрыться от агентов без вашего решения
Неприятнее громких запретов другое: агент может упереться в защиту, которую ставили вовсе не против него. Крис Канал, глава компании EquiStamp, которая проверяет безопасность ИИ, объяснил The Verge, что на сайтах полно защит не от агентов, а от ботов вообще, от мошенников и взломщиков.
Одна из таких защит есть у того же Cloudflare. С 15 сентября 2026 года Cloudflare по умолчанию закрывает страницы с рекламой от двух видов ботов: агентов и сборщиков текстов для обучения нейросетей. Так сказано в его документации, и касается это новых доменов, подключённых к сервису. Страницы с рекламой сервис находит сам. Владелец нового сайта мог ничего не нажимать, а решение за него уже принято.
Как выглядит невидимая стена, я видел на сайте одной из своих программ. Когда ссылку на сайт вставляют в Telegram, под ней появляется карточка: картинка и пара строк описания. У моей ссылки карточки не было, и картинки для неё на страницах правда не было. Я добавил картинку и строки в коде страниц, по которым Telegram её находит, на все 9 страниц, но карточка так и не появилась. Запрос робота Telegram просто не доходил до сервера, компьютера, на котором лежит сайт. Причина сидела в сети хостинга, компании, у которой арендуют место для сайта: другой сайт на том же сервере вёл себя так же, а сайт на другом сервере показывался сразу. Дальше пришлось бы платить за другой сервер, и на этом я остановился.
С агентом, который заполняет форму, может быть так же: если до сайта не доходит один робот, не обязательно дойдёт другой. Если ссылка на ваш сайт в мессенджере показывается без картинки и описания, это повод спросить того, кто делал сайт, доходят ли до него роботы.
Что теряет сайт, если закроется, и что, если откроется
По тому же пресс-релизу, на июнь 2026 года агент «Бронирование» в Алисе AI был доступен для более чем 30 тысяч ресторанов и примерно 40 тысяч организаций сферы услуг по всей России. Если записаться можно только через сайт заведения, агент сам заполняет форму и отправляет заявку. Если свободного времени нет, нейросеть предлагает другое время или другое место.
Если сайт закроется, салон потеряет именно эту заявку. Человек уже выбрал его и поручил записаться.
Если сайт откроется, вместе с помощниками клиентов придут и другие роботы. The Verge пишет, что наплыв ИИ-ботов уже нагружает инфраструктуру интернета. Для маленького сайта это, по-моему, прежде всего лишние заходы. Взвешивать я бы стал одно: что на сайте ценного, кроме самой заявки.
Если после этого захотите завести своего помощника на ИИ для записи клиентов, сначала проверьте, готов ли к этому сам процесс: там я разбираю признаки, по которым видно, что внедрять ИИ рано.
Как проверить, доходит ли агент ИИ на сайте до заявки
Порядок такой, от самого наглядного к техническому, всего 5 шагов.
- Попросите агента записать вас к себе. Алиса AI открывается на своём сайте, в приложении «Алиса AI» и в Яндекс Браузере. По описанию компании, сценарии «Записаться в салон» и «Забронировать столик» выбираются в меню чата. Сам я этот путь не проходил, шаг взят из пресс-релиза. Успех выглядит так: заявка пришла туда же, куда приходят обычные. Агент нашёл заведение, а заявки нет: переходите к шагам 2–5. Агент заведения не находит: этот способ вам пока недоступен, начинайте сразу с шага 2.
- Откройте файл правил: наберите в адресной строке адрес своего сайта, косую черту и robots.txt. Открылся текст из строк «User-agent» (имя робота) и «Disallow» (что ему нельзя), значит, файл есть. Открылась ошибка «страница не найдена», значит, файла нет, а по справке Google это значит, что ограничений нет.
- Найдите запреты. Запрет выглядит как две строки: «User-agent: GPTBot», под ней «Disallow: /». Первая называет робота, вторая, по справке Яндекс Вебмастера, запрещает ему обход всего сайта. Запрет на GPTBot не страшен: по справке OpenAI, это робот для обучения нейросетей, а не помощник клиента. Насторожить должен запрет на весь сайт под именем робота Яндекса (Yandex, YandexBot) или под звёздочкой «User-agent: *», то есть для всех. Такой запрет закрывает сайт от обхода роботами Яндекса. Касается ли он агента Алисы AI, в справке Яндекса я не нашёл, поэтому проверял бы его первым. Покажите его тому, кто делал сайт, и спросите, зачем он.
- Узнайте у того, кто делал сайт или платит за хостинг, работает ли сайт через сервис защиты вроде Cloudflare. Если нет, шаг пропустите. Если да, попросите его открыть в панели Cloudflare настройки безопасности, раздел о политике для ИИ-ботов (Configure AI bot policies, по документации на октябрь 2026 года). Для каждой группы ботов там 3 варианта: блокировать везде, только на страницах с рекламой или не блокировать. Если сайт сделан на конструкторе, тот же вопрос задайте его поддержке.
- Пройдите путь к заявке сами, с телефона. Если перед кнопкой стоит проверка «я не робот», покажите это тому, кто делал сайт: такая проверка мешает и человеку, и его помощнику.
Не хотите проходить путь сами? Напишите мне: я разберу ваш сайт, пришлю отчёт и на получасовом созвоне покажу, где на пути к заявке теряется человек и его помощник.
Хозяйка салона из примера увидит заявку, только если агент до неё дошёл.
Частые вопросы
Можно ли закрыть сайт от обучения нейросетей и остаться в их поиске?
У крупных компаний это разные роботы. OpenAI, например, пишет, что настройки для робота поиска и робота обучения независимы: первого можно пустить, второго закрыть. Сайт, закрытый для робота поиска, по справке компании не попадает в ответы поиска ChatGPT, хотя ссылка на него в ответах может остаться. Изменения в файле поиск OpenAI учитывает примерно через 24 часа.
Заявку оставил агент: это тот же клиент?
По пресс-релизу Яндекса, перед бронью агент уточняет, во сколько и на кого оформить запись, так что заявка идёт на конкретного человека. Отдельной пометки «заявка от агента» в справках я не нашёл, поэтому обращайтесь с такой заявкой как с любой другой: перезвоните или напишите, чтобы подтвердить запись.
Эльхан Дадашев, ИИ-архитектор. Собираю инструменты на нейросетях под задачи людей, когда готовые программы не устраивают. Здесь пишу, с какими задачами сталкивался сам и как их решил, и разбираю новые нейросети по тому, что они меняют в обычной работе.
Написать автору: Telegram · MAX · Работа со мной
Нужна такая же система под вашу задачу — разбираю процесс и проектирую её на ИИ.